-
节点参考 - 数据治理中心 DataArts Studio
节点参考 节点概述 节点数据血缘 CDM Job DIS Stream DIS Dump DIS Client Rest Client Import GES MRS Kafka Kafka Client ROMA FDI Job DLI Flink Job DLI SQL DLI
-
配置管理 - 数据治理中心 DataArts Studio
配置管理 配置 管理资源 父主题: 数据开发组件
-
关系建模 - 数据治理中心 DataArts Studio
关系建模 逻辑模型设计 物理模型设计 父主题: 模型设计
-
使用教程 - 数据治理中心 DataArts Studio
使用教程 数据架构示例 父主题: 数据架构组件
-
数据质量监控 - 数据治理中心 DataArts Studio
数据质量监控 数据质量监控概述 新建规则模板 新建质量作业 新建对账作业 查看作业实例 查看质量报告 父主题: 数据质量组件
-
通过数据地图查看数据血缘关系 - 数据治理中心 DataArts Studio
通过数据地图查看数据血缘关系 数据血缘方案概述 配置数据血缘 查看数据血缘 父主题: 使用教程
-
配置MRS Presto数据连接 - 数据治理中心 DataArts Studio
Arts Studio支持的数据源。 基础与网络连通配置 MRS集群名 是 选择所属的MRS集群。仅支持连接MRS云服务,自建Hadoop集群必须在纳管到MRS云服务后才可以选择。系统会显示所有项目ID和企业项目相同的MRS集群。 如果选择集群后连接失败,请检查MRS集群与作为A
-
基线运维 - 数据治理中心 DataArts Studio
基线运维 基线运维概述 基线运维约束限制 基线实例 基线管理 事件管理 合理配置基线承诺时间和预警余量 父主题: 运维调度
-
数据权限访问控制 - 数据治理中心 DataArts Studio
数据权限访问控制 配置空间权限集 配置权限集 配置角色 管理成员 配置行级访问控制 同步MRS Hive和Hetu权限 申请与审批权限 启用细粒度认证 父主题: 统一权限治理
-
脚本/MyBatis方式生成API - 数据治理中心 DataArts Studio
配置API基本信息 在DataArts Studio控制台首页,选择实例,单击“进入控制台”,选择对应工作空间的“数据服务”模块,进入数据服务页面。 图1 选择数据服务 在左侧导航选择服务版本(例如:专享版),进入总览页。 进入“API管理”页面,单击“新建”,填写API基本信息。 表1 API基本信息
-
区域和可用区 - 数据治理中心 DataArts Studio
的访问时延,不建议使用。 云服务之间的关系 如果多个云服务一起搭配使用,需要注意不同区域的云服务内网不互通。 例如DataArts Studio(包括管理中心、CDM等组件)需要与MRS、OBS等服务互通时,如果DataArts Studio与其他云服务处于不同区域的情况下,需要
-
MRS中恢复HBase表 - 数据治理中心 DataArts Studio
shell中执行: flush <table name> 在源端CDH集群HBase shell执行: compact <table name> 如果表没有打开Snap功能,则执行: hadoop dfsadmin -allowSnapshot $path 创建HDFS Snapshot,例如命名s0:
-
管理单个作业 - 数据治理中心 DataArts Studio
日志”来查看该作业最近的一次日志。 查看作业JSON 直接编辑作业的JSON文件,作用等同于修改作业的参数配置。 源目的统计查询 可对已经配置好的数据库类作业打开预览窗口,预览最多1000条数据内容。可对比源端和目的端的数据,也可以通过对比记录数来看迁移结果是否成功、数据是否丢失。 修改 修改作业参数
-
Python - 数据治理中心 DataArts Studio
选择执行Python语句的主机。需确认该主机配有用于执行Python脚本的环境。 须知: Shell或Python脚本可以在该ECS主机上运行的最大并发数由ECS主机的/etc/ssh/sshd_config文件中MaxSessions的配置值确定。请根据Shell或Python脚本
-
查看集群基本信息/修改集群配置 - 数据治理中心 DataArts Studio
如果是关闭用户隔离,需要重启集群VM才能生效,在集群列表处,选择操作列中的“更多 > 重启”。 图5 重启集群 重启CDM服务进程:只重启CDM服务的进程,不会重启集群虚拟机。 重启集群VM:业务进程会中断,并重启集群的虚拟机。 选择“重启集群VM”后单击“确定”。 父主题: 管理集群
-
步骤9:服务退订(可选) - 数据治理中心 DataArts Studio
产生消息通知服务费用,收费标准请参见SMN价格详情。 EIP服务:如果您为数据集成集群或数据服务专享版集群开通了公网IP,则会产生弹性公网IP服务费用,收费标准请参见EIP价格详情。 DEW服务:在数据集成或创建管理中心连接时,如果启用了KMS,则会产生密钥管理费用,收费标准请参见DEW价格详情。
-
管理静态脱敏任务 - 数据治理中心 DataArts Studio
MapReduce服务(MRS Hive) MapReduce服务(MRS Hive) 使用源端MRS Hive所在的MRS集群 MapReduce服务(MRS Hive)所在的MRS集群必须开启Kerberos认证,且必须安装Spark组件。 数据仓库服务(DWS) 使用MRS
-
为什么权限同步到DLI中,会提示权限不够? - 数据治理中心 DataArts Studio
为什么权限同步到DLI中,会提示权限不够? 权限同步到DLI的任务通过云服务委托(dlg_agency)完成,因此需要委托拥有IAM认证服务相关权限,具体所需权限如表1所示。 表1 待授予权限 权限名称 配置目的 是否必选 授权项/系统权限(二者选其一配置即可) IAM权限 系统
-
步骤4:服务退订(可选) - 数据治理中心 DataArts Studio
步骤4:服务退订(可选) 本开发场景中,DataArts Studio、OBS和DWS服务均会产生相关费用。在使用过程中,如果您额外进行了通知配置,可能还会产生以下相关服务的费用: SMN服务:如果您在使用DataArts Studio各组件过程中开启了消息通知功能,则会产生消息
-
导入导出 - 数据治理中心 DataArts Studio
您可以将某个DataArts Studio实例的数据架构中已创建的表导出到Excel文件中。导出后的文件可用于导入到关系模型中。导出模型的操作请参见导出表或DDL。 打开下载的模板,请根据业务需求填写好模板中的相关参数并保存,模板中的“填写说明”Sheet页供参考。 模板中的参数,其中名称前带“*”的参数为