数据治理中心 DATAARTS STUDIO-创建数据集成作业:新建OBS到MySQL迁移作业

时间:2024-12-04 14:09:34

新建OBS到MySQL迁移作业

为方便演示,需要将OBS中的 CS V格式的样例数据导入到MySQL数据库中。

  1. DataArts Studio 数据集成控制台,进入“集群管理”页面,在集群列表中找到所需要的集群,单击“作业管理”
  2. “作业管理”页面,单击“表/文件迁移”,再单击“新建作业”

    图8 表/文件迁移

  3. 按照如下步骤将数据源准备中的4张原始数据表,依次从OBS迁移到MySQL数据库中。

    1. 配置作业vertex_user_obs2rds。
      源端的“源目录或文件”选择在数据源准备中上传到OBS的vertex_user.csv,由于表中有中文字符还需额外配置高级属性“编码类型”为“GBK”。目的端的“表名”选择在创建MySQL原始数据表中创建的vertex_user表。然后单击“下一步”
      图9 vertex_user_obs2rds作业配置

    2. 在字段映射中,检查字段映射顺序是否正确。如果字段映射顺序正确,单击下一步即可。
      图10 vertex_user_obs2rds字段映射

    3. 任务配置无需修改,直接保存并运行即可。
      图11 任务配置

  4. 等待作业运行完成后,如果作业成功,则vertex_user表已成功迁移到MySQL数据库中。

    图12 vertex_user_obs2rds作业运行成功

  5. 参考24,完成vertex_movie_obs2rds、edge_friends_obs2rds和edge_rate_obs2rds作业的创建,将4张原始表从OBS迁移到MySQL中。
support.huaweicloud.com/bestpractice-dataartsstudio/dataartsstudio_05_0304.html