检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
审批人邮箱,仅在创建审批人时填写。 fast_approval 否 Boolean 快速审批,非正式场景,用于快速上手体验,仅在当前用户有审批权限时提供。 schedule_time 否 String 作业调度时间。格式参照:30_18,表示18点30分。 env_type 否 String
参考访问DataArts Studio实例控制台,以华为账号、拥有DAYU Administrator或Tenant Administrator权限的用户登录DataArts Studio控制台。 从DataArts Studio控制台,进入DataArts Studio实例列表。 如果当前区域下有多个DataArts
枚举值: PUBLISH_TYPE_PUBLIC:公开 PUBLISH_TYPE_PRIVATE:私有 log_flag Boolean 是否开启日志记录。 path String API的访问路径。 host String 共享版域名。 hosts InstanceHostDTO object
节点执行失败后,是否重新执行节点。 是:重新执行节点,请配置以下参数。 最大重试次数 重试间隔时间(秒) 否:默认值,不重新执行节点。 说明: 建议仅对文件类作业或启用了导入阶段表的数据库作业配置自动重试,避免自动重试重复写入数据导致数据不一致。 如果调度CDM迁移作业时使用了参数传递,不能在CDM迁移作
时时间内未执行完成,该节点将会再次重试。 失败重试 如果作业执行失败,可选择自动重试三次或者不重试。推荐值:不重试。 建议仅对文件类作业或启用了导入阶段表的数据库作业配置自动重试,避免自动重试重复写入数据导致数据不一致。 说明: 如果通过DataArts Studio数据开发使用
secrecy_level_num Long 密级层级。 name String 规则名称。 guid String guid。 enable Boolean 规则是否开启。 method String 规则方式, REGULAR, NONE, DEFAULT content_expression String
英文名称。只允许英文字母、数字、空格、下划线、中划线、左右括号以及&符号。 别名 只允许除\、<、>以外的字符。 说明: 您需提前在配置中心的“模型配置”页签中启用主题设计别名,这里才可配置别名。 上级主题 选择所属的上级主题。 数据owner部门 数据的拥有者所在部门。 *数据owner人员 在下拉
在迁移过程中可以对字段进行转换,目前支持以下字段转换器: 脱敏 去前后空格 字符串反转 字符串替换 去换行 表达式转换 约束限制 作业源端开启“使用SQL语句”参数时不支持配置转换器。 如果在字段映射界面,通过获取样值的方式无法获得所有列(例如从HBase/CloudTable/
调度类型。 start_time 否 String 开始时间。 job_id 否 Integer 工作id。 enabled 否 Integer 启用。 表5 CustomMetadata 参数 是否必选 参数类型 描述 description 否 String 描述。 type 否 String
调度类型。 start_time 否 String 开始时间。 job_id 否 Integer 工作id。 enabled 否 Integer 启用。 表5 CustomMetadata 参数 是否必选 参数类型 描述 description 否 String 描述。 type 否 String
String 调度类型。 start_time String 开始时间。 job_id Integer 工作id。 enabled Integer 启用。 表5 CustomMetadata 参数 参数类型 描述 description String 描述。 type String 类型。
CDM可以在迁移过程中对字段进行转换,目前支持以下字段转换器: 脱敏 去前后空格 字符串反转 字符串替换 去换行 表达式转换 约束限制 作业源端开启“使用SQL语句”参数时不支持配置转换器。 如果在字段映射界面,CDM通过获取样值的方式无法获得所有列(例如从HBase/CloudTab
例如:源字段类型是否可以转换为目的字段类型。 自动创表场景下,需在目的端表中提前手动新增字段,再在字段映射里新增字段。 约束限制 作业源端开启“使用SQL语句”参数时不支持配置转换器。 如果在字段映射界面,CDM通过获取样值的方式无法获得所有列(例如从HBase/CloudTab
Success,返回data数据是该目录及其子目录下的全部数据标准集合,以及总数。 400 失败,用户请求非法。 401 失败,用户身份认证失败。 403 失败,用户无权限调用此API。 404 失败,用户请求API不存在。 父主题: 数据标准接口
CDM可以在迁移过程中对字段进行转换,目前支持以下字段转换器: 脱敏 去前后空格 字符串反转 字符串替换 去换行 表达式转换 约束限制 作业源端开启“使用SQL语句”参数时不支持配置转换器。 如果在字段映射界面,CDM通过获取样值的方式无法获得所有列(例如从HBase/CloudTab
schedule_interval Integer 调度间隔。 schedule_status String 调度状态 NOT_SCHEDULE 未启用任务调度 SCHEDULING 任务调度中 sync_status String 同步状态 UNKNOWN 未知 NOT_SYNC 未同步
数据连接名称:dws_link 标签:可选参数。您可以输入新的标签名称,也可以在下拉列表中选择已有的标签。 适用组件:保持默认即可。 SSL加密:是否开启,请与源端DWS集群的配置保持一致。 连接方式:选择“通过代理连接”。 手动:选择“集群名”模式,“IP”和“端口”不需要手动填写。 DWS集群名:选择所创建的DWS集群。
最近一次执行任务开始时间,单位:毫秒。由系统生成,用户无需填写。 delete_rows Integer 增量作业删除行数,已废弃。 enabled Boolean 是否激活连接。由系统生成,用户无需填写。 bytes_written Long 作业写入的字节。由系统生成,用户无需填写。 id Integer 作业ID。由系统生成,用户无需填写。
name 否 String API名称。 description 否 String API描述。 log_flag 否 Boolean 是否启用访问日志。 api_type 否 String API类型。 枚举值: API_SPECIFIC_TYPE_CONFIGURATION: 配置类API
如果通过DataArts Studio数据开发调度CDM迁移作业,CDM迁移作业处也配置了定时任务,则两种调度均会生效。为了业务运行逻辑统一和避免调度冲突,推荐您启用数据开发调度即可,无需配置CDM定时任务。 配置作业调度任务(批处理作业) 配置批处理作业的作业调度任务,支持单次调度、周期调度、事件驱动调度三种方式。操作方法如下: