数据治理中心 DATAARTS STUDIO-通过DataArts Studio调度大数据服务时需要注意什么?

时间:2024-04-28 17:34:30

通过 DataArts Studio 调度大数据服务时需要注意什么?

DLI MRS 作为大数据服务,不具备锁管理的能力。因此如果同时对表进行读和写操作时,会导致数据冲突、操作失败。

如果您需要对大数据服务数据表进行读表和写表操作,建议参考以下方式之一进行串行操作处理:

  • 将读表和写表操作拆分为同一作业的不同节点,两个节点通过连线建立先后执行关系,避免同时执行冲突。
  • 将读表和写表操作拆分为两个不同的作业,两个作业之间设置依赖关系,避免同时执行冲突。
support.huaweicloud.com/dataartsstudio_faq/dataartsstudio_03_0149.html