-
查看数据血缘 - 数据治理中心 DataArts Studio
新建并运行元数据采集任务 请参见任务管理,新建并运行元数据采集任务,注意任务中需要选择待查看血缘关系的数据表。 如果此前已创建并运行过待查看数据表的元数据采集任务,此操作可跳过。 启动作业调度 元数据采集完成后,系统基于最新的作业调度实例产生相关的数据血缘关系。
-
终端节点Endpoint - 数据治理中心 DataArts Studio
DataArts Studio其他组件接口(如管理中心、数据架构、数据质量、数据目录、数据服务、数据安全、数据地图等):dayu.{region_id}.myhuaweicloud.com,具体如表3所示。
-
查看数据血缘 - 数据治理中心 DataArts Studio
新建并运行元数据采集任务 请参见任务管理,新建并运行元数据采集任务,注意任务中需要选择待查看血缘关系的数据表。 如果此前已创建并运行过待查看数据表的元数据采集任务,此操作可跳过。 启动作业调度 元数据采集完成后,系统基于最新的作业调度实例产生相关的数据血缘关系。
-
查找事实表 - 数据治理中心 DataArts Studio
最小长度:0 最大长度:4096 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。 最小长度:3 最大长度:64 X-Project-Id 否 String 项目ID,获取方法请参见项目ID和账号ID。
-
步骤1:准备工作 - 数据治理中心 DataArts Studio
开通DLI服务后,您需要在管理中心创建DLI连接,然后通过数据开发组件新建数据库,再执行SQL来创建OBS外表。操作步骤如下: 参考访问DataArts Studio实例控制台登录DataArts Studio管理控制台。
-
新建衍生指标 - 数据治理中心 DataArts Studio
管理衍生指标 进入数据架构的“技术指标 > 衍生指标”页面,您可以对衍生指标进行编辑、发布、下线、查看发布历史或删除操作。 图4 管理衍生指标 在数据架构控制台,单击左侧导航树中的“技术指标”,选择“衍生指标”页签,进入衍生指标页面。 您可以根据实际需要选择如下操作。
-
查询数据标准模板 - 数据治理中心 DataArts Studio
最小长度:0 最大长度:4096 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。 最小长度:3 最大长度:64 X-Project-Id 否 String 项目ID,获取方法请参见项目ID和账号ID。
-
如何使用Java调用CDM的Rest API创建数据迁移作业? - 数据治理中心 DataArts Studio
获取方法:在集群管理界面,单击CDM集群名称可查看集群ID,例如“c110beff-0f11-4e75-8b10-da7cd882b0ef”。
-
新建事实表 - 数据治理中心 DataArts Studio
管理事实表 事实表创建好之后,进入数据架构的“维度建模 > 事实表”页面,您可以对事实表进行编辑、发布、下线、查看发布历史或删除操作。 图6 事实表管理 编辑事实表 在事实表列表中,找到需要编辑的事实表,单击“编辑”,进入编辑事实表页面。 根据实际需要编辑相关内容。
-
OBS Manager - 数据治理中心 DataArts Studio
源文件或目录 是 OBS桶中需要被管理的OBS文件或所在目录。 目的目录 是 存放待移动或复制OBS文件的新目录。 文件过滤器 否 输入文件过滤的通配符,满足该过滤条件的文件才会被移动或复制。当不指定该参数时,默认移动所有源文件。
-
步骤1:准备工作 - 数据治理中心 DataArts Studio
创建DWS集群后,您需要在管理中心创建DWS连接,然后通过数据开发组件新建数据库、数据库模式,再执行SQL来创建DWS表。操作步骤如下: 参考访问DataArts Studio实例控制台登录DataArts Studio管理控制台。
-
新建对账作业 - 数据治理中心 DataArts Studio
您可以对已调度起的实例任务进行日常的运维管理,如查看运行状态,对任务进行终止、重跑等操作。 只有支持委托提交作业的MRS集群,才支持对账作业周期调度。 支持委托方式提交作业的MRS集群有: MRS的非安全集群。
-
更新表模型 - 数据治理中心 DataArts Studio
最小长度:0 最大长度:4096 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。 最小长度:3 最大长度:64 X-Project-Id 否 String 项目ID,获取方法请参见项目ID和账号ID。
-
获取SQL节点的输出结果值 - 数据治理中心 DataArts Studio
选择“空间管理”页签,在工作空间列表中,找到所需要的工作空间,单击工作空间的“数据开发”,系统跳转至数据开发页面。 在“作业开发”页面,新建数据开发子作业EL_test_slave。选择一个Kafka Client节点,并配置作业参数,编排图6所示的作业。
-
获取SQL节点的输出结果值 - 数据治理中心 DataArts Studio
选择“空间管理”页签,在工作空间列表中,找到所需要的工作空间,单击工作空间的“数据开发”,系统跳转至数据开发页面。 在“作业开发”页面,新建数据开发子作业EL_test_slave。选择一个Kafka Client节点,并配置作业参数,编排图6所示的作业。
-
通过数据开发实现数据增量迁移 - 数据治理中心 DataArts Studio
在CDM“作业管理”界面的“表/文件迁移”页签下,找到已创建的作业,单击作业操作列的“更多 > 查看作业JSON”,如图1所示。 您也可以使用其它已创建好的CDM作业JSON。
-
目的端为OBS - 数据治理中心 DataArts Studio
需先在密钥管理服务中创建密钥。 toJobConfig.projectID 否 String KMS密钥所属的项目ID。
-
MRS Spark Python - 数据治理中心 DataArts Studio
前往MRS管理控制台进行新建。 如何新建集群,请参见《MapReduce服务(MRS) 使用指南》中的创建集群章节。 MRS资源队列 否 选择已创建好的MRS资源队列。 当配置默认项“MRS资源队列是否必填”设置为“是”时,该参数为必填。
-
新建质量作业 - 数据治理中心 DataArts Studio
您可以对已调度起的实例任务进行日常的运维管理,如查看运行状态,对任务进行终止、重跑等操作。 只有支持委托提交作业的MRS集群,才支持质量作业周期调度。 支持委托方式提交作业的MRS集群有: MRS的非安全集群。
-
数据集成API错误码 - 数据治理中心 DataArts Studio
用户权限不足 在CDM控制台操作时,请参考CDM权限管理为该用户授予足够的操作权限。 在DataArts Studio控制台操作时,请参考DataArts Studio权限管理为该用户授予足够的操作权限。 Cdm.0036 400 内部错误。 内部错误。