检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
作业类型为REAL_TIME时类型可选择如下:FlinkSQL、FlinkJar、DLISpark。 lastUpdateUser 否 String 作业最后修改人。 logPath 否 String 作业运行日志存放的OBS路径。 basicConfig 否 BasicConfig数据结构 作业的基本信息,参考表29。
逻辑表预览 目标端配置。 图6 配置目标端参数 源库表和目标匹配策略: 目标端库名:自定义目标端库名。 表匹配策略:默认为与源端逻辑表同名,不可更改。 写入模式:选择数据写入模式。 UPSERT为批量更新入库模式,COPY为DWS专有的高性能批量入库模式。 批写最大数据量:根据表数据大
Describe:查询权限 Create:创建主题权限 Delete:删除主题权限 Describe Configs:查询配置权限 Alter Configs:修改配置权限 Storm Storm的Topology权限: Submit Topology:提交拓扑 File Upload:上传文件 File
钟不等。 图5 逻辑表预览 目标端配置。 源库表和目标匹配策略: 目标端库名:自定义目标端库名。 表匹配策略:默认为与源端逻辑表同名,不可更改。 目标数据源配置: 数据存储路径:Hudi数据存储的基础路径,只对自动建表生效。每张目的端表会在基础路径下创建子目录,支持HDFS或OB
选择源端和目的端的数据类型,支持的源端与目的端请参见支持的数据源。 图1 选择数据连接类型 选择集成作业类型。 同步类型:默认为实时,不可更改。 选择同步场景,支持分库分表和整库同步方式,具体支持的数据源请参见支持的数据源。 不同场景介绍如表1所示。 表1 同步场景参数说明 场景类型