-
DataArts Studio使用简介 - 数据治理中心 DataArts Studio
变现,实现数字化转型。 DataArts Studio使用流程简介 使用DataArts Studio平台,通常包括以下步骤: 表1 DataArts Studio全流程开发 主流程 说明 子任务 操作指导 流程设计 在使用DataArts Studio前,建议您通过流程设计提前
-
使用前必读 - 数据治理中心 DataArts Studio
使用前必读 概述 调用说明 基本概念 终端节点Endpoint 项目ID和账号ID 实例ID和工作空间ID 数据资产guid 约束与限制
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 创建MRS Hive连接器 创建MySQL连接器 MySQL数据迁移到MRS Hive分区表 MySQL数据迁移到OBS MySQL数据迁移到DWS MySQL整库迁移到RDS服务 Oracle数据迁移到云搜索服务 Oracle数据迁移到DWS OBS数据迁移到云搜索服务
-
使用流程 - 数据治理中心 DataArts Studio
据连接、委托等资源。 使用流程 您可通过图1了解统一权限治理的使用流程。 图1 统一权限治理使用流程图 统一权限治理支持数据权限管控、服务资源管控和Ranger权限管理,流程介绍如下: 数据权限管控流程 准备工作 在正式开始配置数据权限管控前,按照准备工作1和准备工作2(DLI权
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 数据架构示例 父主题: 数据架构组件
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 脚本及作业中引用参数使用介绍 作业调度支持每月最后一天 配置作业调度为年调度 补数据场景使用介绍 获取SQL节点的输出结果值 查询SQL获取max值传递给CDM作业 IF条件判断教程 获取Rest Client节点返回值教程 For Each节点使用介绍 引用脚本模板和参数模板的使用介绍
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 新建MRS Hive连接 新建DWS连接 新建MySQL连接 父主题: 管理中心组件
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 新建一个业务场景 新建一个质量作业 新建一个对账作业实例 父主题: 数据质量组件
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 开发一个增量元数据采集任务 通过数据地图查看数据血缘关系 父主题: 数据目录组件
-
使用前准备 - 数据治理中心 DataArts Studio
使用前准备 添加审核人 管理配置中心 父主题: 数据架构组件
-
For Each节点使用介绍 - 数据治理中心 DataArts Studio
应的DLI目的表,如表1所示。 表1 需要导入的列表情况 源数据表名 目的表名 a_new a b_2 b c_3 c d_1 d c_5 e b_1 f 如果通过SQL节点分别执行导入脚本,需要开发大量脚本和节点,导致重复性工作。在这种情况下,我们可以使用For Each节点进行循环作业,节省开发工作量。
-
如何降低CDM使用成本? - 数据治理中心 DataArts Studio
如何降低CDM使用成本? 如果是迁移公网的数据上云,可以使用NAT网关服务,实现CDM服务与子网中的其他弹性云服务器共享弹性IP,可以更经济、更方便的通过Internet迁移本地数据中心或第三方云上的数据。 具体操作如下: 假设已经创建好了CDM集群(无需为CDM集群绑定专用弹性
-
步骤1:准备工作 - 数据治理中心 DataArts Studio
100007,18,1,1,2021/1/7 100008,20,1,6,2021/1/8 100009,60,0,4,2021/1/9 100010,20,1,1,2021/1/10 100011,35,0,5,2021/1/11 100012,20,1,1,2021/1/12 100013
-
查询APP服务使用TopN - 数据治理中心 DataArts Studio
查询APP服务使用TopN 功能介绍 查询APP服务使用TopN。 调用方法 请参见如何调用API。 URI GET /v1/{project_id}/service/statistic/apps-top-n 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是
-
补数据场景使用介绍 - 数据治理中心 DataArts Studio
如果SQL脚本的内容有变化,补数据作业运行的是最新版本的脚本。 使用补数据功能时,如SQL中变量是DATE,脚本中就写${DATE},在作业参数中会自动增加脚本参数DATE,脚本参数DATE的值支持使用EL表达式。如果是变量时间的话,需要使用DateUtil内嵌对象的表达式,平台会自动转换成历
-
步骤1:准备工作 - 数据治理中心 DataArts Studio
步骤1:准备工作 使用DataArts Studio前的准备 如果您是第一次使用DataArts Studio,请参考准备工作章节完成注册华为账号、购买DataArts Studio实例(DataArts Studio企业版)、创建工作空间等一系列操作。然后进入到对应的工作空间,即可开始使用DataArts
-
步骤1:流程设计 - 数据治理中心 DataArts Studio
统计不同支付类型收入占比 业务调研 在开始使用DataArts Studio前,您可以通过业务调研,明确业务过程中所需的DataArts Studio组件功能,并分析后续的业务负载情况。 表1 业务调研表 序号 收集项 需收集信息描述 调研结果 填写说明 1 工作空间 企业大数据相关部门的组织和关系调查
-
数据架构使用流程 - 数据治理中心 DataArts Studio
数据架构使用流程 DataArts Studio数据架构的流程如下: 图1 数据架构流程 准备工作: 添加审核人:在数据架构中,业务流程中的步骤都需要经过审批,因此,需要先添加审核人。只有工作空间管理员角色的用户才具有添加审核人的权限。 管理配置中心:数据架构中提供了丰富的自定义
-
补数据场景使用介绍 - 数据治理中心 DataArts Studio
如果SQL脚本的内容有变化,补数据作业运行的是最新版本的脚本。 使用补数据功能时,如SQL中变量是DATE,脚本中就写${DATE},在作业参数中会自动增加脚本参数DATE,脚本参数DATE的值支持使用EL表达式。如果是变量时间的话,需要使用DateUtil内嵌对象的表达式,平台会自动转换成历
-
For Each节点使用介绍 - 数据治理中心 DataArts Studio
应的DLI目的表,如表1所示。 表1 需要导入的列表情况 源数据表名 目的表名 a_new a b_2 b c_3 c d_1 d c_5 e b_1 f 如果通过SQL节点分别执行导入脚本,需要开发大量脚本和节点,导致重复性工作。在这种情况下,我们可以使用For Each节点进行循环作业,节省开发工作量。