返回首页

gbase数据、南大通用产品文档:GBase8a

更新日期:2024年09月11日

orato8a 导出大数据量卡住
问题现象
用orato8a 导出1.2T 数据,
导出290G 左右数据就无法写入。
试过全表导出和query
方式导出,都出现了同样的现象。
orato8a 报错:
ERROR CODE = 1555
ORA-01555:snapshot too old:rollback segment number 614 with name "_SYS
SMU614_278740291$" too small
export columns:60
export rows:645661015
export time:4 hours 21 min 6 sec
process ok!
原因分析
问题是当单次查询导出数据量过大,且其它应用DML 操作提交过多时,oracle
的快照失效引起。
解决方案

orato8a:
1)使用--table_name 参数,加大--parallel 并发数,以减少查询导出时间;
2)使用--query 参数,带where 过滤,以减少查询导出时间。

oracle 配置
3)增加UNDO 表空间大小;
4)增加UNDO_RETENTION 时间,默认为15 分钟。

现场其它访问oracle 的应用
1)避免频繁的DML 操作提交。

enable_bitmapscan
参数说明:控制优化器对位图扫描规划类型的使用。
该参数属于USERSET 类型参数,请参考表15-1 中对应设置方法进行设置。
取值范围:布尔型

on 表示使用。

off 表示不使用。
默认值:on

gcluster_loader_min_chunk_size
取值:[1, 4294967295]
默认值:64M
说明:用来指定本次加载任务中数据文件分块的最小粒度。
取值范围[1, 4294967295],单位是字节。默认值64M。
修改方式:可在配置文件中修改值。适用于global 范围。

GBase 8a MPP Cluster 参数手册
文档版本2022-06-07
南大通用数据技术股份有限公司
106