数据治理中心 DATAARTS STUDIO-开发一个Hive SQL作业:开发Hive SQL作业

时间:2023-11-21 17:10:44

开发Hive SQL作业

Hive SQL脚本开发完成后,我们为Hive SQL脚本构建一个周期执行的作业,使得该脚本能定期执行。

  1. 创建一个数据开发模块空作业,作业名称为“job_hive_sql”

    图2 创建job_hive_sql作业

  2. 然后进入到作业开发页面,拖动 MRS Hive SQL节点到画布中并单击,配置节点的属性。

    图3 配置MRS Hive SQL节点属性

    关键属性说明:

    • SQL脚本:关联开发Hive SQL脚本中开发完成的Hive SQL脚本“hive_sql”
    • 数据连接:默认选择SQL脚本“hive_sql”中设置的数据连接,支持修改。
    • 数据库:默认选择SQL脚本“hive_sql”中设置的数据库,支持修改。
    • 节点名称:默认显示为SQL脚本“hive_sql”的名称,支持修改。

  3. 作业编排完成后,单击,测试运行作业。
  4. 如果运行成功,单击画布空白处,在右侧的“调度配置”页面,配置作业的调度策略。

    图4 配置调度方式

    该作业调度时间在2021/01/01至2021/01/25,每天2点调度一次作业。

  5. 最后我们需要提交版本,执行调度作业,实现作业每天自动运行。
support.huaweicloud.com/usermanual-dataartsstudio/dataartsstudio_01_0522.html