数据治理中心 DATAARTS STUDIO-通过CDM节点批量创建分表迁移作业:适用场景

时间:2024-05-31 19:04:50

适用场景

业务系统中,数据源往往会采用分表的形式,以减少单表大小,支持复杂的业务应用场景。

在这种情况下,通过CDM进行数据集成时,需要针对每张表创建一个数据迁移作业。您可以参考本教程,通过数据开发模块的For Each节点和CDM节点,配合作业参数,实现批量创建分表迁移作业。

本教程中,源端MySQL数据库中存在三张分表,分别是mail01、mail02和mail03,且表结构一致,数据内容不同。目的端为MRS Hive服务。

support.huaweicloud.com/bestpractice-dataartsstudio/dataartsstudio_05_0002.html