更新日期:2024年09月11日
GBase UP 中,
集群加载功能直接集成在GBase UP 内部,不需要额外部署外部加载
工具。加载工具具备如下一些特性和优点:
与集群高度集成,方便部署;
提供面向用户的SQL 接口,
集群和单机加载方式统一,
更符合用户的使用习惯;
支持多加载机对单表的并行加载,最大化加载性能;
支持从通用数据服务器拉取数据,支持ftp/http/hdfs 等多种协议;
支持普通文本、gzip 压缩、snappy 压缩等多种格式数据文件;
支持普通文本与定长文本的加载(format 3 和format 4);
支持错误数据溯源功能,可以准确定位错误数据在源文件中的位置;
加载性能可以随着集群规模的扩展而持续提升;