华为云首页用户手册

MAPREDUCE服务 MRS-配置同步任务的心跳和数据判齐:配置从Oracle（ogg）抓取数据到Hudi任务的心跳表

MAPREDUCE服务 MRS-配置同步任务的心跳和数据判齐:配置从Oracle（ogg）抓取数据到Hudi任务的心跳表

时间：2024-04-22 14:52:05

MAPREDUCE服务 MRS 创建CDL作业前准备

配置从Oracle（ogg）抓取数据到Hudi任务的心跳表

在需要同步数据的Oracle数据库中执行以下命令创建一张心跳表，心跳表归属于CDC_CDL Schema，表名为CDC_HEARTBEAT，主键为CDL_JOB_ID：
CREATE TABLE "CDC_CDL"."CDC_HEARTBEAT" (

"CDL_JOB_ID" VARCHAR(22) PRIMARY KEY,

"CDL_LAST_HEARTBEAT" TIMESTAMP,

SUPPLEMENTAL LOG DATA (ALL) COLUMNS

);
将CDC_HEARTBEAT表加入到Oracle或者ogg的任务中，确保心跳数据可以正常发送到Kafka。

如果是Oracle任务，直接执行4。
在CDL WebUI配置thirdparty-kafka（ogg）连接增加Oracle的连接信息。
配置完成后，在CDL WebUI界面创建从Oracle（ogg）抓取数据到Hudi任务并启动即可收到心跳数据。

上一篇：MAPREDUCE服务 MRS-配置同步任务的心跳和数据判齐:配置从Postgresql抓取数据到Hudi任务的心跳表

下一篇：MAPREDUCE服务 MRS-配置同步任务的心跳和数据判齐:数据判齐消息字段含义

MAPREDUCE服务 MRS-配置同步任务的心跳和数据判齐:配置从Oracle（ogg）抓取数据到Hudi任务的心跳表

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题