检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
终端协议 通知方式选择“按责任人”时才需配置。 配置该参数前，请确保工作空间默认项设置中已配置作业告警通知主题。 短信 邮件 电话 单击“校验联系方式”，系统会自动校验基线责任人信息是否已配置。如果基线责任人信息未配置，请前往终端订阅管理界面进行配置，以确保告警能被正常接收。 单击“查
Each循环执行的节点，让CDM子作业循环执行，并配置节点属性参数。 配置MRS Spark SQL节点的属性参数，并关联已创建的脚本maxtime。 图3 配置MRS Spark SQL节点属性参数 配置For Each节点的属性参数，并关联已创建的CDM子作业。 图4 配置For Each节点参数
映射策略。 在配置账号映射策略的映射列表时，不支持校验MRS系统账号或ldap账号是否存在以及密码是否正确，若配置错误的用户名密码，会导致账号映射失败。而对于默认访问身份的配置的账号密码，系统支持校验。 配置账号映射策略 账号映射策略可以分为三部分：一为基本信息配置；二为默认访问
数据权限访问控制 配置空间权限集 配置权限集 配置角色 管理成员 配置行级访问控制 同步MRS Hive和Hetu权限 申请与审批权限（部分高级特性） 管理权限有效期（高级特性） 配置建库申请（高级特性） 启用细粒度认证 启用账号映射（高级特性） 配置未来表权限（高级特性） 父主题：
过滤类型：选择“通配符”。 文件过滤器：配置为“*${dateformat(yyyyMMdd,-1,DAY)}*”（这是CDM支持的日期宏变量格式，详见时间宏变量使用解析）。 图1 文件过滤 配置作业定时自动执行，“重复周期”为1天。 这样每天就可以把昨天生成的文件都导入到目的端目录，实现增量同步。
单据。 审批配置 仅当前工作空间的管理员或者拥有DAYU Administrator、Tenant Administrator权限的用户可以进行审批配置。打开审批开关后，可以对作业或者脚本进行审批配置。 图1 配置审批 选择“数据开发 > 审批中心”，单击“审批配置”页签。 开启
CloudTable HOST config 否 Map<String,String> 连接的配置项，不同类型的连接配置项不同。DLI类型的连接不需要配置。config参数，其他类型的连接请参考连接配置项说明。 description 否 String 描述，长度不能超过255个字符。 响应参数
Spark作业算子，配置算子相关参数，配置指导请参见MRS Spark。 配置调度周期。调度周期设置为天。 图3 配置调度周期（天） 配置天任务依赖分钟任务的依赖关系。 勾选上“最近”后，天任务作业只会依赖距离其定时运行时间最近的一个分钟任务作业实例。 图4 配置依赖属性 作业配置完成后，保存并提交版本。
仅当循环执行的子作业配置了作业参数后，出现该参数。参数名即子作业中定义的变量，参数值按如下原则填写： 当循环执行的子作业需要根据父作业的变量读取替换时，则本参数为可配置为EL表达式，一般配置为#{Loop.current[0]}或#{Loop.current[1]}等，表示循环中取遍历到的数据
在创建CDM表/文件迁移的作业，源连接选择为MongoDB连接或者DDS连接时，高级属性的可选参数中可以配置查询筛选。 图1 MongoDB查询筛选 此参数支持配置为时间宏变量，例如起始时间配置为{"ts":{$gte:ISODate("${dateformat(yyyy-MM-dd'T'HH:mm:ss
因为此表达式只能直接获取当前作业里配置的参数的value，并不能获取到父作业传递过来的参数值，也不能获取到工作空间里面配置的全局变量，作用域仅为本作业。 而表达式${job_param_name}，既可以获取到父作业传递过来的参数值，也可以获取到全局配置的变量。 图7 配置Kafka Client节点参数
组件中，仅安全管理员和DAYU Administrator系统角色有权限进行如下操作： 配置空间权限集 配置行级权限访问控制 同步用户 配置空间资源权限 配置细粒度认证 配置队列权限 如需配置安全管理员，则需要以具有DAYU Administrator系统角色权限的账号登录数据安
在任务树中选中transport目录，然后单击“新建”按钮，开始新建采集任务。 按如下配置，新建采集任务transport_all。配置采集任务后，单击“下一步”。 图2 新建采集任务-基本配置 图3 新建采集任务-元数据采集 根据需要配置调度方式，配置完成后单击“提交”，完成采集任务的创建。 图4 调度方式
DWS模型的表支持以下表类型： DWS_ROW：行存表。行存储是指将表按行存储到硬盘分区上。 DWS_COLUMN：列存表。列存储是指将表按列存储到硬盘分区上。 DWS_VIEW：视图存表。视图存储是指将表按视图存储到硬盘分区上。 MRS_HIVE模型支持HIVE_TABLE和HIVE_EXTERNAL_TABLE。
手动配置血缘，是在数据开发作业节点中，自定义血缘关系的输入表和输出表。注意手动配置血缘时，此节点的自动血缘解析将不生效。支持手动配置血缘的节点类型请参见手动配置血缘。 数据血缘的展示： 首先在数据目录组件完成元数据采集任务，当数据开发作业满足自动血缘解析要求或已手动配置血缘，然
义策略配置后，单击“确定”完成MRS和CDM相关自定义策略创建。 创建自定义策略时，暂不支持同时选全局级云服务和项目级云服务，需要拆分为两条策略。因此本例先配置IAM相关策略，再配置MRS和CDM相关策略。 名称：DataArtsIamUserGroup_MRS 策略配置方式：单
添加审核人 管理配置中心 数据架构中提供了丰富的自定义选项，统一通过配置中心提供，您可以根据自己的业务需要进行自定义配置。 在数据架构控制台，单击左侧菜单栏的“配置中心”，进入配置中心页面。 进入“功能配置”页签，如下图所示，设置“模型设计业务流程步骤”。 图2 功能配置 单击“确定”完成配置。
Hive连接时，提示：CORE_0031:Connect time out. (Cdm.0523) 。 解决方案 新建MRS Hive连接时，提示无法下载配置文件，实际是用户权限不足。建议您新建一个业务用户，给对应的权限后重试即可。 如果要创建MRS安全集群的数据连接，不能使用admin用户。因
CloudTable HOST config 否 Map<String,String> 连接的配置项，不同类型的连接配置项不同。DLI类型的连接不需要配置。config参数，其他类型的连接请参考连接配置项说明。 description 否 String 描述，长度不能超过255个字符。 请求示例
统也支持直接下载大文件。 图9 导出记录 立即刷新 在质量作业和对账作业运行完毕后，通过立即刷新功能，用户可以立即获得零点到当前时间的数据质量报告临时数据。到第二天凌晨，质量报告的调度任务开始执行，此时生成的数据是前一天的全量数据质量报告。 在DataArts Studio控制台
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
