正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
String 资产名称。 level 是 String 主题所属层级。 name 是 String 名称。 nameEng 是 String 英文名称。 alias 否 String 别名。 description 是 String 描述。 dataOwner 是 String 数据主体。
分页返回结果,指定每页最大记录数。范围[1,1000] 默认值:10 jobName 否 String 作业名称 tags 否 String 作业标签列表,如果有多个标签,以英文逗号分隔。例如:tag1,tag2,tag3。 请求参数 表1 请求Header参数 参数名 是否必选 参数类型 说明 workspace
描述 fd_name String 属性名称。 fd_name_en String 属性英文名称。 description String 属性描述。 descriptionEn String 属性英文描述。 label String 属性标签。 disabled Boolean 是否禁用。
['003']] 子作业参数:@@#{Loop.current[0]}@@ 此处子作业参数的EL表达式需要添加@@。如果不加@@包围,数据集001会被识别为1,导致源表名不存在的问题。 如下图所示: 图10 配置关键参数 配置完成后单击“保存并提交版本”,以保存主作业。 创建主作业和子作业完
是否必选 参数类型 描述 id 否 String 码表ID,填写String类型替代Long类型。 name_en 是 String 表名称,英文名。 name_ch 是 String 表名称,中文名。 tb_version 否 Integer 表版本。 directory_id 是
id 否 String 编码,填写String类型替代Long类型。 name_en 是 String 原子指标英文名。 name_ch 是 String 原子指标英文名。 description 否 String 描述。 create_by 否 String 创建人。 cal_exp
id 否 String 编码,填写String类型替代Long类型。 name_en 是 String 原子指标英文名。 name_ch 是 String 原子指标英文名。 description 否 String 描述。 create_by 否 String 创建人。 cal_exp
#停止SparkContext sc.stop() 需要将编码格式设置为“UTF-8”,否则后续脚本运行时会报错。 准备数据文件“in.txt”,内容为一段英文单词。 操作步骤: 将脚本和数据文件传入OBS桶中,如下图。 图1 上传文件至OBS桶 本例中,wordcount.py和in.txt文件
src_col_1)的值格式化后写入cdc_partition_key中。 自定义分区:选择源端的某个字段或多个字段作为分区,多个分区通过英文半角逗号”,”分割。 附加字段编辑:单击操作列“附加字段编辑”可为迁移后的Hudi表中增加自定义字段,附加字段会成为一个新的字段加入到Hudi表的建表中。
如果周期类型为“month”,设定周期为“1”,“runAt”输入“15”,就表示每个月的15号执行该定时任务。并且该参数支持输入多个,以英文的逗号“,”分隔开。 例如上述场景中“runAt”输入“1,2,3,4,5”,就表示每个月的1日、2日、3日、4日和5日执行该定时任务。
CodeTableVO 参数 参数类型 描述 id String 码表ID,填写String类型替代Long类型。 name_en String 表名称,英文名。 name_ch String 表名称,中文名。 tb_version Integer 表版本。 directory_id String
参数类型 描述 id String 编码,填写String类型替代Long类型。 name_en String 原子指标英文名。 name_ch String 原子指标英文名。 description String 描述。 create_by String 创建人。 cal_exp String
CodeTableVO 参数 参数类型 描述 id String 码表ID,填写String类型替代Long类型。 name_en String 表名称,英文名。 name_ch String 表名称,中文名。 tb_version Integer 表版本。 directory_id String
参数类型 描述 id String 编码,填写String类型替代Long类型。 name_en String 原子指标英文名。 name_ch String 原子指标英文名。 description String 描述。 create_by String 创建人。 cal_exp String
String 汇总表的唯一系统ID,更新时必填,创建时不须填写,填写String类型替代Long类型。 tb_name 是 String 汇总表英文名称,对应实际的物理表名。 tb_logic_name 是 String 汇总表的中文名,用于展示使用。 l2_id 否 String 主题域ID,只读,创建和更新时无需填写。
息发布-订阅系统,它提供了类似于JMS的特性,但在设计上完全不同,它具有消息持久化、高吞吐、分布式、多客户端支持、实时等特性,适用于离线和在线的消息消费,如常规的消息收集、网站活性跟踪、聚合统计系统运营数据(监控数据)、日志收集等大量数据的互联网服务的数据收集场景。 MapReduce服务(MRS
编码,填写String类型替代Long类型。 name_ch 是 String 自定义项中文名称。 name_en 是 String 自定义项英文名称。 not_null 是 Boolean 是否必填。 optional_values 否 String 可选值。当可选值有多个时,用分号分隔。
度CDM作业。 通过数据开发实现数据增量迁移 DataArts Studio服务的DLF组件提供了一站式的大数据协同开发平台,借助DLF的在线脚本编辑、周期调度CDM的迁移作业,也可以实现增量数据迁移。本文以DWS导入到OBS为例,介绍DLF配合CDM实现增量迁移的流程 通过CDM节点批量创建分表迁移作业
CodeTableVO 参数 参数类型 描述 id String 码表ID,填写String类型替代Long类型。 name_en String 表名称,英文名。 name_ch String 表名称,中文名。 tb_version Integer 表版本。 directory_id String
CodeTableVO 参数 参数类型 描述 id String 码表ID,填写String类型替代Long类型。 name_en String 表名称,英文名。 name_ch String 表名称,中文名。 tb_version Integer 表版本。 directory_id String