检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Dummy节点不执行任何操作,本例选择Dummy节点仅为演示操作,实际使用中您可以用其他作业节点替代。 DIS Client节点用于发送消息。您需要选择DIS所属Region和通道,并将发送数据配置为EL表达式job1,#{DateUtil.getDay(Job.startTime)}。则当本作业执行完成后,将使用DIS
借助标签语法来灵活实现空值校验、多值遍历、动态查表、动态排序及聚合等复杂查询逻辑。 MyBatis方式当前在“华南-广州”区域公测,公测结束后会陆续在其他区域上线。 前提条件 已在“管理中心 > 数据连接”页面,完成数据源的配置。 约束与限制 API生成暂不支持Hive数据源的中文表和中文列场景。
维度:数据质量支持从完整性、有效性、及时性、一致性、准确性、唯一性六个维度进行单列、跨列、跨行和跨表的分析。自定义质量规则时,请对此规则进行维度匹配。 所属目录:选择该规则模板所在的目录。 标签:选择所需的标签。标签是在数据地图组件中定义的标签。如果未使用数据地图组件,则标签功能不生效。 描述:对此自定义模板进行简单说明。
连接的名称,根据连接的数据源类型,用户可自定义便于记忆、区分的连接名。 obs_link OBS终端节点 终端节点(Endpoint)即调用API的请求地址,不同服务不同区域的终端节点不同。您可以通过以下方式获取OBS桶的Endpoint信息: OBS桶的Endpoint,可以进入OBS控制台概览页,单击桶名称后查看桶的基本信息获取。
实现行级访问控制策略生效,则需要启用细粒度认证。 为确保行级访问控制策略生效,须确保策略中指定的用户已具备待控制操作的表权限,同时需要将表所属模式的USAGE权限授予该用户。可通过如下命令为指定的user1,user2,user3授权。 GRANT USAGE ON SCHEMA
参数类型 描述 project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。 model_id 是 String 所属关系建模的模型ID,ID字符串。model_id可从接口获取模型中获取。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述
路径。用“/”作为分隔,如:运营领域/云学院/云学院培训方案。 qualifiedName 是 String 资产名称。 level 是 String 主题所属层级。 name 是 String 名称。 nameEng 是 String 英文名称。 alias 否 String 别名。 description
作业算子类型。 node_qualified_name String 作业算子Qname。 workspace_id String 作业算子类型所属空间。 状态码: 400 表6 响应Body参数 参数 参数类型 描述 error_code String 错误码。 error_msg String
路径。用“/”作为分隔,如:运营领域/云学院/云学院培训方案。 qualifiedName 是 String 资产名称。 level 是 String 主题所属层级。 name 是 String 名称。 nameEng 是 String 英文名称。 alias 否 String 别名。 description
登录DataArts Studio控制台。 单击“数据服务”模块。 单击左侧菜单“共享版> SDK”或“专享版 > SDK”。 单击SDK使用引导区域里对应语言的SDK,下载SDK包到本地。 进行SDK包完整性校验。Windows操作系统下,打开本地命令提示符框,输入如下命令,在本地生成
开发环境和生产环境的数据湖服务,在开发和生产流程中自动切换对应的数据湖。因此您需要准备两套数据湖服务,且两套数据湖服务的版本、规格、组件、区域、VPC、子网以及相关配置等信息,均应保持一致,详细操作请参见创建DataArts Studio数据连接。 创建数据连接时,通过不同的集群
cal_exp 是 String 计算表达式,形如'${table_id.column_id} > 1',其中table_id表示引用字段所属表ID,column_id表示引用字段ID。 cal_fn_ids 是 Array of strings 引用函数ID,ID字符串。 front_configs
选择需要同步的Kafka Topic 消费组ID 消费者是从Topic订阅消息的一方,消费组是由一个或多个消费者组成的。Migration支持指定本次消费动作所属的Kafka消费组。 Kafka源端属性配置 支持设置Kafka的配置项,需要增加 properties. 前缀,作业将自动移除前缀并传入底层Kafka客户端,具体参数可参考
表3 请求Body参数 参数 是否必选 参数类型 描述 id 否 String 编码,ID字符串。 model_id 是 String 所属关系建模的模型ID,ID字符串。 parent_table_id 否 String 父表ID,ID字符串。 related_logic_table_id
Long 作业ID。 name String 作业名称。 description String 作业描述。 category_id Long 所属目录ID level String 告警级别,SUGGEST表示提示,MINOR表示一般,MAJOR表示严重,FATAL表示致命。 alarm_condition
在“空间权限集”页面,找到需要配置的空间权限集,单击权限集名称进入详情页面。 图3 进入空间权限集详情 基本信息:在空间权限集详情页面,基本信息区域可以查看空间权限集名称、ID、管理员等信息,详见图4。 图4 空间权限集基本信息 权限配置:在权限集详情页面,权限配置页签默认展示数据视角
集页面。 在“权限集”页面,找到需要配置的权限集,单击权限集名称进入详情页面。 图3 进入权限集详情 基本信息:在权限集详情页面,基本信息区域可以查看权限集名称、ID、管理员等信息,详见图4。 图4 权限集基本信息 权限配置:在权限集详情页面,权限配置页签默认展示数据视角,可手动
value,统一的返回结果的外层数据结构。 表6 TableModelVO 参数 参数类型 描述 id String 编码,ID字符串。 model_id String 所属关系建模的模型ID,ID字符串。 parent_table_id String 父表ID,ID字符串。 parent_table_name
表的详情信息。 表6 TableModelVO 参数 参数类型 描述 id String 编码,ID字符串。 model_id String 所属关系建模的模型ID,ID字符串。 parent_table_id String 父表ID,ID字符串。 parent_table_name
可能是由于OBS终端节点与当前区域不一致、AK/SK错误、AK/SK不是当前用户的AK/SK、安全组或防火墙规则未放行等原因。若排除上述原因后仍无法解决,请联系客服或技术支持人员协助解决。 Cdm.0801 400 OBS桶[%s]不存在。 OBS桶不存在。 指定的OBS桶可能不存在或不在当前区域,请指定正确的OBS桶后再重试。