解决方案工作台-数据调研作业:配置调研规则

时间:2025-06-13 19:19:50

配置调研规则

配置调研规则用来配置数据探源的时间调度配置,如DB采集周期,表信息采集周期等,由解决方案工作台生成配置文件,结合探源工具示例代码完成数据探源。

点击【配置调研规则】进入配置界面。

图3 配置调研规则
  1. 首先要添加监控对象,即要监控的数据源,配置想要采集的数据连接的库表信息,以及所需采集的空值字段的表名和表字段名的采集。

    点击【添加监控对象】。

    图4 添加监控对象
  2. 选择已有的想要采集的数据连接名称,然后填写schema名称,如果开启空值率检测,则需要填写表名称,默认检查全部字段的空值率。完成后点击【下一步】。
    图5 添加监控对象
  3. 配置鉴权码。

    数据调研结果可在线上报或离线导入。如果运行调研工具的服务器可访问公网,则可在此选择【开启】鉴权码,然后点击【添加】,将开启状态的鉴权码复制配置到数据调研的配置文件中,数据调研结果将会在线上报至解决方案工作台;否则需要离线导入,此时可选择【关闭】鉴权码。完成后点击【下一步】。

    图6 配置鉴权码
  4. 时间调度配置。

    解决方案工作台支持使用调研工具对源系统进行数据调研,支持配置数据调研规则,包含DB、表信息等采集周期和具体时间,如果未配置,则按默认规则进行数据采集。

    表1

    参数

    说明

    DB采集

    配置数据库采集时间,如:数据库类型,数据库表数,数据总量,采集时间。

    表信息采集

    配置表的采集时间。

    字段采集

    配置字段采集时间。

    上报采集

    配置库、表、字段采集信息的上报时间。

    删除字段

    各项目根据自己公司的实际情况,配置表在软删除时删除字段的名称。

    图7 时间调度配置

    完成后点击【确定】,将会自动下载配置文件application.xlsx。

    配置文件中包含了前面配置的规则、数据源信息等,用户可以修改配置文件中的信息。由于解决方案工作台不记录数据库密码,因此下载配置文件后可自行在文件中补充数据库登录密码。

    图8

support.huaweicloud.com/usermanual-haydncsf/haydncsf_04_0126.html