-
创建并管理工作空间 - 数据治理中心 DataArts Studio
务和数据水印任务。 如果当前任意组件内还有业务资源,则删除工作空间会弹出失败提示窗口,无法删除。 如果当前各组件内还有业务资源,则您需要根据失败提示窗口,删除对应业务资源后再次重试删除。 图2 删除失败提示 父主题: 管理工作空间
-
(可选)购买DataArts Studio功能增量包 - 数据治理中心 DataArts Studio
(可选)购买DataArts Studio功能增量包 DataArts Studio采用基础包+增量包的计费模式。如果购买的基础包无法满足您的使用需求,您可以额外购买增量包。在购买增量包前,请确保您已购买DataArts Studio实例。 增量包大体可分为功能增量包与规格增量包,功能增量包用于拓展DataArts
-
管理作业标签 - 数据治理中心 DataArts Studio
当作业标签是“锁定”状态时,不能被删除。 当作业标签是“锁定”状态时,导入该标签会失败。 当作业标签是“锁定”状态时,作业也不能添加或移除该标签。 导入作业时,如果作业中存在“锁定”状态的标签,则作业导入会失败。 当作业导入失败需要自动生成标签时,如果标签已存在且被锁定,则导入失败的作业不会添加上该标签。
-
(可选)购买规格增量包 - 数据治理中心 DataArts Studio
(可选)购买规格增量包 DataArts Studio采用基础包+增量包的计费模式。如果购买的基础包无法满足您的使用需求,您可以额外购买增量包。在购买增量包前,请确保您已购买DataArts Studio实例。 增量包大体可分为功能增量包与规格增量包,功能增量包用于拓展DataArts
-
基线管理 - 数据治理中心 DataArts Studio
关闭基线任务,系统不会监控基线任务以及其依赖链上游的所有任务。 报警开关 :开启报警开关,当系统预测到基线上任务无法在承诺时间前完成,或上游任务有出错或变慢的情况,将发送报警信息,用户将收到基线任务的报警信息。 :关闭报警开关,用户无法收到基线任务的报警信息。 主题 该主题是指SMN消息通知服务的主题。 单击“添
-
配置DLI源端参数 - 数据治理中心 DataArts Studio
资源队列 选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 cdm 数据库名称 写入数据的数据库名称。 dli 表名 写入数据的表名。 car_detail 分区 用于抽取分区的信息。 year=2020,location=sun
-
资源迁移 - 数据治理中心 DataArts Studio
单击“新建导出”,配置文件的OBS存储位置和文件名称。 图2 选择导出文件 单击“下一步”,勾选导出的模块。 图3 勾选导出的模块 单击“下一步”,等待导出完成,资源包导出到所设置的OBS存储位置。 图4 导出完成 导出资源耗时1分钟仍未显示结果则表示导出失败,请重试。如果仍然无法导出,请联系客服或技术支持人员协助解决。
-
删除作业 - 数据治理中心 DataArts Studio
删除作业 当用户不需要使用某个作业时,可以参考如下操作删除该作业,以减少作业的配额占用。 作业删除后,将无法恢复,请确保删除作业后,不影响业务。 普通删除 参考访问DataArts Studio实例控制台登录DataArts Studio管理控制台。 在DataArts Stud
-
配置DLI目的端参数 - 数据治理中心 DataArts Studio
选择目的表所属的资源队列。 DLI的default队列无法在迁移作业中使用,您需要在DLI中新建SQL队列。 新建队列操作请参考创建队列。 cdm 数据库名称 写入数据的数据库名称。 dli 表名 写入数据的表名。 car_detail 导入前清空数据 选择导入前是否清空目的表的数据。
-
场景介绍 - 数据治理中心 DataArts Studio
约束限制 本方案仅支持迁移数据到MRS 1.x版本集群,2.x及之后版本无法通过HBase修复命令重建HBase表。 迁移的目标集群为2.x及之后版本时,HBase修复命令已经不再支持,通过HBase数据目录迁移的方式无法使用。 迁移方案 图1 迁移方案 H公司的车联网大数据业务平台当前CDH(Cloudera
-
Java - 数据治理中心 DataArts Studio
在“Name”中输入“Main”,勾选“public static void main(String[] args)”。 图11 设置Class的配置 单击“Finish”。 完成“Main”文件的创建。 完成工程创建后,最终目录结构如下。 图12 新建工程的目录结构 “Main.java”
-
DataArts Studio的工作空间可以删除吗? - 数据治理中心 DataArts Studio
删除”。 在“删除工作空间”对话框中,如果确认删除,请单击“确认”。 如果当前各组件内还有业务资源,则您需要根据失败提示窗口,删除对应业务资源后再次重试删除。 图1 删除失败提示 父主题: 咨询与计费
-
查看作业依赖关系图 - 数据治理中心 DataArts Studio
您可以通过查看作业依赖关系视图,直观查看该作业关联的上下游作业。 前提条件 已经在开发Pipeline作业的作业调度配置中设置了依赖作业,否则视图中仅能展示当前作业节点,无法展示具备依赖关系的上下游作业节点。 操作步骤 参考访问DataArts Studio实例控制台登录DataArts Studio管理控制台。
-
设置工作空间配额 - 数据治理中心 DataArts Studio
对已分配配额进行配置。配置完成后单击“保存”,保存当前配置。 已分配配额表示分配给当前工作空间下可使用的配额。注意,已分配配额不能小于已使用配额,不能大于未分配配额(即总配额-总分配配额)。 数据服务专享版在每个DataArts Studio实例下具有创建10个专享版API免费
-
删除集群 - 数据治理中心 DataArts Studio
删除集群 操作场景 当您确认不再使用当前集群后,可以删除当前CDM集群。 删除CDM集群后集群以及数据都销毁且无法恢复,请您谨慎操作! 删除集群前,请您确认如下注意事项: 待删除集群确认已不再使用。 待删除集群中所需的连接和作业数据已通过批量管理作业中的导出作业功能进行备份。 对于购买DataArts
-
Rest Client - 数据治理中心 DataArts Studio
、“$”、“{”、“}”,多个值使用“;”分隔。 请求失败标志位 否 填写请求失败标志位,如果响应消息的返回值与请求失败标志位中的某一个匹配,表示节点执行失败。当“是否需要判断返回值”为“YES”时,显示该配置项。 请求失败标志位只支持英文字母、数字、“-”、“_”、“$”、“{”、“}”,多个值使用“;”分隔。
-
管理中心数据搬迁 - 数据治理中心 DataArts Studio
单击“新建导出”,配置文件的OBS存储位置和文件名称。 图2 选择导出文件 单击“下一步”,勾选导出的模块。 图3 勾选导出的模块 单击“下一步”,等待导出完成,资源包导出到所设置的OBS存储位置。 图4 导出完成 导出资源耗时1分钟仍未显示结果则表示导出失败,请重试。如果仍然无法导出,请联系客服或技术支持人员协助解决。
-
数据集成 - 数据治理中心 DataArts Studio
CDM迁移作业的抽取并发数应该如何设置? CDM是否支持动态数据实时迁移功能? CDM是否支持集群关机功能? 如何使用表达式方式获取当前时间? 日志提示解析日期格式失败时怎么处理? 字段映射界面无法显示所有列怎么处理? CDM迁移数据到DWS时如何选取分布列? 迁移到DWS时出现value too long for
-
定义数据分类 - 数据治理中心 DataArts Studio
单击分类目录上方的,在“编辑数据分类目录”页面删除分类。 当父类下有子分类的时候,无法直接删除该父分类,需要先删除子分类。 被引用的数据分类无法直接删除,需要先解除引用关系后才能删除。 删除操作无法撤销,请谨慎操作。 编辑数据分类目录:当需要整体编辑目录时,可以单击分类目录上方的
-
停用/恢复API - 数据治理中心 DataArts Studio
用期间您可以对API进行编辑、调试等操作。 停用后您可以通过恢复API,使该API继续对外提供服务。 停用API将导致此API在指定的时间无法被访问,请确保已经告知使用此API的用户。 前提条件 已创建API。 API已发布到该环境。 停用API 在DataArts Studio