数据仓库服务 GaussDB(DWS)-导入过程存储倾斜即时检测:使用方法
时间:2025-02-12 15:02:13
使用方法
- 设置参数(表倾斜告警阈值table_skewness_warning_threshold和表倾斜告警最小行数table_skewness_warning_rows)。
- 表倾斜告警阈值取值范围0~1,默认值为1,即关闭状态,取其他值时为开启状态。
- 表倾斜告警最小行数取值范围0~2147483647,默认值为100,000。当导入总行数超过该值与导入DN数之积时,才可能触发告警,从而不会在小数据量导入的场景进行无意义的告警。
1234
show table_skewness_warning_threshold;set table_skewness_warning_threshold = xxx;show table_skewness_warning_rows;set table_skewness_warning_rows = xxx;
- 使用INSERT或者COPY导入。
- 发现并处理告警,告警信息包括表名、最小行数、最大行数、总行数、平均行数、倾斜率,以及提示信息(检查数据分布或者修改参数)。
WARNING: Skewness occurs, table name: xxx, min value: xxx, max value: xxx, sum value: xxx, avg value: xxx, skew ratio: xxxHINT: Please check data distribution or modify warning threshold
support.huaweicloud.com/bestpractice-dws/dws_05_0004.html