返回首页

gbase数据、南大通用产品文档:GBase8aGNode 的内存参数

更新日期:2024年09月11日

1.
Heap 参数(global)
gbase_heap_data 主要设计用途是缓存数据(DC),应分配最多的内存。
gbase_heap_large 用于管理不频繁申请、释放的内存。
gbase_heap_temp 用来分配较为琐碎的和小块儿的临时内存,较少使用。
gbase_memory_pct_target 设置内存的可用比例,默认0.8。

参数下限:
gbase_heap_data
>= 512MB
gbase_heap_large
>= 256MB
gbase_heap_temp
>= 256MB

参数上限:
(gbase_heap_data + gbase_heap_large + gbase_heap_temp ) <= total memory *
gbase_memory_pct_target

GBase 8a MPP Cluster 产品手册
5 数据库管理指南
文档版本953(2022-04-10)
南大通用数据技术股份有限公司
1286
注意
默认:
total memory = physical memory
_gbase_memory_use_swap 设置为1 时:
total memory = physical memory + swap
2.
算子buffer(session)
算子buffer 均为session 级别,即如果设置gbase_buffer_result=1G,且并发数
为30,则在执行并发的过程中,30 并发总共占用的gbase_buffer_result 就为
1G*30 = 30G,而且是在不计算其他的算子buffer 的情况下。
所以如果在高并发环境中将某一个算子buffer 设置很大的话,很有可能就会
出现内存不足无法分配的情况。

常用的buffer 如下:

gbase_buffer_distgrby:用于保存distinct 操作的中间结果;

gbase_buffer_hgrby:用于保存shash group by 操作的中间结果;

gbase_buffer_hj:用于保存hash join 操作的中间结果;

gbase_buffer_insert:用于保存insert values 的中间结果;

gbase_buffer_result:用于保存物化的中间结果;

gbase_buffer_rowset:用于保存join 计算的中间结果集;

gbase_buffer_sj:
用于保存sort merge join 的中间结果,
当join 条件是a>=b
或者a<=b 时,可能会使用sort merge join;

gbase_buffer_sort:用于保存sort 操作的中间结果。

算子buffer 的设置原则:
一般情况下(非高并发场景),根据系统内存大小,算子buffer 可以按照如
下方法设置:

gbase_buffer_hgrby 和gbase_buffer_hj 最大不超过4G;

gbase_buffer_result 最大不超过2G;

gbase_buffer_rowset 最大不超过1G;

其他算子使用系统估算即可。

如果在高并发场景下,则不需要设置过大的算子buffer,一般以系统自
动评估为准。但如果并发数过大,不排除需要人为将算子buffer 设置更
小的情况。即并发数乘以总算子buffer 大小不超过gbase_heap_large 为
宜,但最大也不能超过系统总内存大小。

修改算子buffer 的其它场景:
如果某条sql 由于某个算子执行过慢(瓶颈点可参考单机trace),可以适当
调大与之对应算子buffer。例如根据trace 发现join 较慢,可以适当调大

GBase 8a MPP Cluster 产品手册
5 数据库管理指南
文档版本953(2022-04-10)
南大通用数据技术股份有限公司
1287
gbase_buffer_hj 的值。但是需要注意,调整该值时必须不能影响其他SQL 的
执行。


GBase 8a MPP Cluster 产品手册
4 管理员指南
文档版本953(2022-09-15)
南大通用数据技术股份有限公司
121

功能说明
记录存储过程及函数信息。
表结构说明
表5- 288 表结构信息说明:




Vc_id
虚拟集群名
db
数据库名
name
过程及函数名
type
存储过程或函数类型
specific_name
过程及函数名
language
说明子程序是由SQL 语句组成的,当前系统支持的语言为
SQL,SQL 是其唯一值
sql_data_access
存储过程数据存取特征
Contains_sql:子程序不包含读或写数据的语句
no_sql:子程序不包含SQL 语句
reads_sql:子程序包含读数据的语句,但不包含写数据的语句
data modifies_sql_data:子程序包含写数据的语句
is_deterministic
输出结果的确定性
Yes:相同的输入会得到相同的输出
No:相同的输入可能得到不通的输出
security_type
指定谁有权限来执行
Invoker:拥有权限的调用者可以执行
Definer:只有定义者可以执行
param_list
参数列表
returns
返回值类型
body
过程或函数定义
definer
创建者
created
创建时间
modified
修改时间
sql_mode
sql 的执行模式
comment
注释
character_set_client
client 字符集
collation_connection
连接的字符集对照方法
db_collation
数据库的字符集对照方法

GBase 8a MPP Cluster 产品手册
5 数据库管理指南
文档版本953(2022-09-15)
南大通用数据技术股份有限公司
1500
body_utf8
utf8 格式下的定义