检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据集成（CDM作业） 数据集成概述 约束与限制 支持的数据源 创建并管理CDM集群 在CDM集群中创建连接 在CDM集群中创建作业 时间宏变量使用解析 优化迁移性能 关键操作指导 使用教程 常见错误码参考
新建任务有如图2所示的两个入口。 图2 新建采集任务入口 配置基本参数，参考表1。 表1 基本配置说明 参数名 说明 任务名称 采集任务的名称，只能包含中文、英文字母、数字和下划线，且长度不能超过62个字符。 描述 为更好的识别采集任务，此处加以描述信息。描述信息长度不能超过255个字符。 选择目录 采集任务
络连接”对话框输入对应参数，配置参数如下表所示： 表1 新建网络连接参数 参数 说明 连接名称 填写待创建的网络连接名称。 只能包含字母、数字和下划线。 资源组 需要和指定VPC进行网络打通的资源组。 如果创建时未选择资源组，可以在网络连接创建好后再绑定资源组。支持绑定多个资源组，可以通过单击“更多”
*名称 密钥名称，只能包含中文、英文字母、数字、“_”，且长度不能超过64个字符。 *密钥 密钥值，只能包含英文字母、数字、中划线，且长度为32个字符。 *IV IV值（Initial Vector，初始化向量），只能包含英文字母、数字、中划线，且长度为12个字符。 描述 对当前
在弹出的“新建作业”页面，配置如所示的参数。单击“确定”，创建作业。 表1 作业参数 参数 说明 作业名称 自定义作业的名称，只能包含英文字母、数字、中文、“-”、“_”、“.”，且长度为1～128个字符。 作业类型 选择作业的类型。 批处理作业：按调度计划定期处理批量数据，主要用于实
当匹配成功的内容等于设置值时，该节点执行失败。 节点名称 是 默认显示为SQL脚本的名称，支持修改。规则如下： 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”、“<”、“>”等各类特殊字符，长度为1～128个字符。 默认情况下，节点名称会与选择的脚本名称保持同步。若不需要
互式信息（例如密码）。交互式参数之间以空格分隔，Python语句根据交互情况按顺序读取参数值。 节点名称 是 节点名称，只能包含英文字母、数字、中文字符、中划线、下划线、/、<>和点号，且长度小于等于128个字符。 默认情况下，节点名称会与选择的脚本名称保持同步。若不需要节点名称
理企业数据资产，实现数据价值的最大化，急需建立一个完善的数据治理框架体系，为企业数字化转型打下坚实的数据基础。 数据治理方法论是华为数据管理方法论的精华总结，参考了业界数据治理最佳实践，并结合华为数字化转型成功经验优化而成。本文旨在帮助客户持续完善数据管理体系，沿企业主业务流打通
响应参数 表3 Script参数说明 参数名 是否必选 参数类型 说明 name 是 String 脚本名称，只能包含五种字符：英文字母、数字、中文、中划线和点号，且长度小于等于128个字符。脚本名称不能重复。 id 是 String 脚本ID。 type 是 String 脚本类型，包含：
表3 作业参数配置 功能 说明 变量 新增 单击“新增”，在文本框中填写作业参数的名称和参数值。 参数名称 名称只能包含字符：英文字母、数字、中划线和下划线。 参数值 字符串类的参数直接填写字符串，例如：str1。 数值类的参数直接填写数值或运算表达式。 参数配置完成后，在作业中的引用格式为${参数名称}。
参数值。 read -p语法的使用示例： read -p “输入参数1和参数2”变量1 变量2 节点名称 是 节点名称，只能包含英文字母、数字、中文字符、中划线、下划线、/、<>和点号，且长度小于等于128个字符。 默认情况下，节点名称会与选择的脚本名称保持同步。若不需要节点名称
如果字符串仅包含Unicode字符或数字，返回布尔值true，否则返回false。例如“ab2c”中仅包含Unicode字符和数字，返回true。 表达式：StringUtils.isAlphanumeric(value) 如果字符串仅包含Unicode字符、数字或空格，返回布尔值true
填参数，否则会报错。 表3 参数说明 参数名 是否必选 参数类型 说明 name 是 String 作业名称，只能包含六种字符：英文字母、数字、中文、中划线、下划线和点号，且长度小于等于128个字符。作业名称不能重复。 nodes 是 List<Node> 节点定义，参考表4。 schedule
连接方式对比 参数 用户可参考表1配置Dummy节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”、“<”、“>”等各类特殊字符，长度为1～128个字符。 父主题： 节点参考
则重新命名后恢复正常。 例如，DWS数据仓库中的数据表命名需要满足以下约束：长度不超过63个字符，以字母或下划线开头，中间字符可以是字母、数字、下划线、$、#。 解决方案 重新命名。 父主题： 数据集成（CDM作业）
并发数是指单个数据连接下的SQL并发数，如果超出则等待排队执行。 表2 规则实例列表说明 菜单/按键 说明 实例名称 由“规则名称-数字”组成，数字越大，表示该实例创建的时间越近。 类型 显示作业类型，当前包含质量作业和对账作业。 运行状态 展示实例运行状态，包含成功、失败和运行
系统默认的数仓分层的四层层级的名称支持由管理员自定义，单击层级名后的即可重命名。重命名建议能够区分不同层级，规则为只能包含英文字母、中文、数字、下划线，且以英文字母或中文开头。 物理模型、维度模型、数据集市，都是模型，在数仓规划进行统一管理。 数仓规划支持细粒度权限管控，在数据安
"user1", "description" : "中国身份证号", "enable" : true, "method" : "DEFAULT", "name" : "中国身份证号", "secrecy_level"
者变量，则后续在数据开发模块调度此节点，可以间接实现CDM作业根据参数变量进行数据迁移。 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”、“<”、“>”等各类特殊字符，长度为1～128个字符。 默认情况下，节点名称会与选择的CDM作业保持同步。若不需
会报错。 表3 Script参数说明 参数名 是否必选 参数类型 说明 name 是 String 脚本名称，只能包含五种字符：英文字母、数字、中文、中划线和点号，且长度小于等于128个字符。脚本名称不能重复。 type 是 String 脚本类型，包含： FlinkSQL DLISQL
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
