检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
autoRemind 否 Boolean 消息通知。 phoneNum 否 String 手机号码,最多填写20个,以英文逗号分隔。 email 否 String 邮箱地址,最多填写20个,以英文逗号分隔。 响应参数 无 请求示例 修改集群配置。 POST /v1.1/1551c7f6c80841
请求Body参数 参数 是否必选 参数类型 描述 id 否 String 码表ID,ID字符串。 name_en 是 String 表名称,英文名。 name_ch 是 String 表名称,中文名。 tb_version 否 Integer 表版本。 directory_id 是
请求Body参数 参数 是否必选 参数类型 描述 id 否 String 码表ID,ID字符串。 name_en 是 String 表名称,英文名。 name_ch 是 String 表名称,中文名。 tb_version 否 Integer 表版本。 directory_id 是
#停止SparkContext sc.stop() 需要将编码格式设置为“UTF-8”,否则后续脚本运行时会报错。 准备数据文件“in.txt”,内容为一段英文单词。 操作步骤: 将脚本和数据文件传入OBS桶中,如下图。 图1 上传文件至OBS桶 本例中,wordcount.py和in.txt文件
参数 是否必选 参数类型 描述 id 否 String 复合指标ID,ID字符串。更新时必填。 name_en 是 String 复合指标英文名称。 name_ch 是 String 复合指标名称。 description 否 String 描述 dimension_group 是
参数 是否必选 参数类型 描述 id 否 String 复合指标ID,ID字符串。更新时必填。 name_en 是 String 复合指标英文名称。 name_ch 是 String 复合指标名称。 description 否 String 描述 dimension_group 是
AtomicIndexVO 参数 参数类型 描述 id String 编码,ID字符串。 name_en String 原子指标英文名。 name_ch String 原子指标英文名。 description String 描述。 create_by String 创建人。 cal_exp String
DynamicMaskingPolicySet 参数 参数类型 描述 id String 动态脱敏策略id。 name String 动态脱敏策略名称。英文和汉字开头, 支持英文、汉字、数字、下划线, 2-64字符。 datasource_type String 数据源类型 HIVE数据源 DWS数据源 DLI数据源
如果周期类型为“month”,设定周期为“1”,“runAt”输入“15”,就表示每个月的15号执行该定时任务。并且该参数支持输入多个,以英文的逗号“,”分隔开。 例如上述场景中“runAt”输入“1,2,3,4,5”,就表示每个月的1日、2日、3日、4日和5日执行该定时任务。
src_col_1)的值格式化后写入cdc_partition_key中。 自定义分区:选择源端的某个字段或多个字段作为分区,多个分区通过英文半角逗号”,”分割。 附加字段编辑:单击操作列“附加字段编辑”可为迁移后的Hudi表中增加自定义字段,附加字段会成为一个新的字段加入到Hudi表的建表中。
DimensionVO 参数 参数类型 描述 id String 编码(新建时只读,更新时必填),ID字符串。 name_en String 维度英文名称。 dimension_type String 维度类型(更新时只能由普通维度改为层级维度,其余场景都不允许修改)。 枚举值: COMMON:
码表结构。 表5 CodeTableVO 参数 参数类型 描述 id String 码表ID,ID字符串。 name_en String 表名称,英文名。 name_ch String 表名称,中文名。 tb_version Integer 表版本。 directory_id String
息发布-订阅系统,它提供了类似于JMS的特性,但在设计上完全不同,它具有消息持久化、高吞吐、分布式、多客户端支持、实时等特性,适用于离线和在线的消息消费,如常规的消息收集、网站活性跟踪、聚合统计系统运营数据(监控数据)、日志收集等大量数据的互联网服务的数据收集场景。 MapReduce服务(MRS
表7 CodeTableVO 参数 参数类型 描述 id String 码表ID,ID字符串。 name_en String 表名称,英文名。 name_ch String 表名称,中文名。 tb_version Integer 表版本。 directory_id String
大对象(BLOB) OTHER: 其它类型 data_type_extend String 数据类型扩展字段。 name_en String 英文名。 name_ch String 中文名。 not_null Boolean 是否不为空。 attribute_type String
src_col_1)的值格式化后写入cdc_partition_key中。 自定义分区:选择源端的某个字段或多个字段作为分区,多个分区通过英文半角逗号”,”分割。 附加字段编辑:单击操作列“附加字段编辑”可为迁移后的Hudi表中增加自定义字段,附加字段会成为一个新的字段加入到Hudi表的建表中。
src_col_1)的值格式化后写入cdc_partition_key中。 自定义分区:选择源端的某个字段或多个字段作为分区,多个分区通过英文半角逗号”,”分割。 附加字段编辑:单击操作列“附加字段编辑”可为迁移后的Hudi表中增加自定义字段,附加字段会成为一个新的字段加入到Hudi表的建表中。
AtomicIndexVO 参数 参数类型 描述 id String 编码,ID字符串。 name_en String 原子指标英文名。 name_ch String 原子指标英文名。 description String 描述。 create_by String 创建人。 cal_exp String
度CDM作业。 通过数据开发实现数据增量迁移 DataArts Studio服务的DLF组件提供了一站式的大数据协同开发平台,借助DLF的在线脚本编辑、周期调度CDM的迁移作业,也可以实现增量数据迁移。本文以DWS导入到OBS为例,介绍DLF配合CDM实现增量迁移的流程 通过CDM节点批量创建分表迁移作业
参数类型 描述 id 否 String 汇总表的唯一系统ID,更新时必填,创建时不须填写,ID字符串。 tb_name 是 String 汇总表英文名称,对应实际的物理表名。 tb_logic_name 是 String 汇总表的中文名,用于展示使用。 l2_id 否 String 主题域ID,只读,创建和更新时无需填写。