数据治理中心 DATAARTS STUDIO-新建一个对账作业实例:操作步骤

时间:2024-05-17 10:57:27

操作步骤

  1. 建立跨源数据连接。

    1. 创建 DLI 数据连接。在 DataArts Studio 管理中心模块,单击创建数据连接,数据连接类型选择“ 数据湖探索 (DLI)”,输入数据连接名称,单击“测试”,提示连接成功,单击“确定”。

    2. 创建DWS数据连接。在DataArts Studio管理中心模块,单击创建数据连接,数据连接类型选择“ 数据仓库 服务(DWS)”,输入数据连接名称,设置其他参数,如下图所示,单击“测试”,提示连接成功,单击“确定”。

  2. 创建对账作业。

    1. DataArts Studio数据质量模块,单击左侧导航菜单“对账作业”。
    2. 单击“新建”,配置对账作业的基本信息,如下图所示。
      图1 配置基本信息
    3. 单击“下一步”,进入规则配置页面。您需要单击规则卡片中的,然后配置对账规则,如下图所示。

      • 需要分别配置源端和目的端的信息。配置源端连接请参见配置DWS数据连接,配置目的端连接请参见配置DLI数据连接
      • 配置告警条件,其中单击左侧的表行数(${1_1})表示左侧源端选中表的行数,单击右侧表行数(${2_1})表示目的端表行数。此处配置告警条件为${1_1}!=${2_1},表示当左侧表行数与右侧表行数不一致时,触发报警并显示报警状态。
    4. 单击“下一步”,配置订阅信息,如下图所示。

      勾选触发告警表示作业报警时发送通知到对应的smn主题,勾选运行成功表示不报警时发送通知到 SMN 主题。

    5. 单击“下一步”,配置调度方式,如下图所示。

      单次调度表示需要手动触发运行,周期性调度表示会按照配置定期触发作业运行。此处以当天配置为例,设置每15分钟触发运行一次对账作业为例的配置。

    6. 单击“提交”,对账作业创建完成。

  3. 查看对账作业。

    1. 单击对应的对账作业操作列中的运行链接,运行对账作业后,自动跳转到运维管理页面。
    2. 单击结果&日志查看运行结果和运行日志,等待作业运行结束后,如下图所示。

support.huaweicloud.com/usermanual-dataartsstudio/dataartsstudio_01_0720.html