数据治理中心 DATAARTS STUDIO-创建数据集成作业:新建OBS到MySQL迁移作业
时间:2025-04-27 14:57:10
新建OBS到MySQL迁移作业
为方便演示,需要将OBS中的 CS V格式的样例数据导入到MySQL数据库中。
- 在 DataArts Studio 数据集成控制台,进入“集群管理”页面,在集群列表中找到所需要的集群,单击“作业管理”。
- 在“作业管理”页面,单击“表/文件迁移”,再单击“新建作业”。
图8 表/文件迁移
- 按照如下步骤将数据源准备中的4张原始数据表,依次从OBS迁移到MySQL数据库中。
- 配置作业vertex_user_obs2rds。
源端的“源目录或文件”选择在数据源准备中上传到OBS的vertex_user.csv,由于表中有中文字符还需额外配置高级属性“编码类型”为“GBK”。目的端的“表名”选择在创建MySQL原始数据表中创建的vertex_user表。然后单击“下一步”。图9 vertex_user_obs2rds作业配置
- 在字段映射中,检查字段映射顺序是否正确。如果字段映射顺序正确,单击下一步即可。
图10 vertex_user_obs2rds字段映射
- 任务配置无需修改,直接保存并运行即可。
图11 任务配置
- 配置作业vertex_user_obs2rds。
- 等待作业运行完成后,如果作业成功,则vertex_user表已成功迁移到MySQL数据库中。
图12 vertex_user_obs2rds作业运行成功
- 参考2到4,完成vertex_movie_obs2rds、edge_friends_obs2rds和edge_rate_obs2rds作业的创建,将4张原始表从OBS迁移到MySQL中。
support.huaweicloud.com/bestpractice-dataartsstudio/dataartsstudio_05_0304.html