应用与数据集成平台 ROMA CONNECT-配置目标端数据信息:MRS Kafka
MRS Kafka
返回页首
任务的“集成模式”为“定时”或“实时”时,可以选择MRS Kafka作为目标端数据源。
- 在创建任务页面中配置目标端信息。
表20 目标端MRS Kafka信息 参数
配置说明
目标端实例
配置为当前正在使用的ROMA Connect实例,源端实例配置后目标端自动关联,无需配置。
目标端集成应用
选择MRS Kafka数据源所属的集成应用,在接入数据源时已配置。
目标端数据类型
选择“MRS Kafka”。
数据源名称
选择接入数据源中已配置的MRS Kafka数据源。
Topic名称
填写用户在MRS Kafka服务已创建的Topic名称,不可随意自定义。
Key
填写消息的Key值,表示消息存储在指定分区,可以当成有序消息队列使用。如果Key为空,则消息分布式存储在不同的消息分区。
元数据
定义写入到目标端Kafka消息的数据字段。源端有多少个字段需要集成,则目标端需要定义相同个数的元数据。
- 别名:对元数据的自定义名称。
- 类型:元数据的数据类型,需要与源端数据中对应字段的数据类型一致。
目标端为MRS Kafka的配置与Kafka的类似,配置示例可参考Kafka配置示例。
- 完成目标端信息配置后,继续进行下一部分配置,配置数据映射规则。
- 数据治理中心_数据开发_数据开发能力_脚本和节点介绍-华为云
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- 华为云资料 2021年 7月刊
- 大数据分析是什么_使用MapReduce_创建MRS服务
- MapReduce服务_什么是Kafka_如何使用Kafka
- MapReduce服务_什么是MapReduce服务_什么是HBase
- Kafka架构_Kafka如何实现负载均衡_Kafka数据存储方式-华为云
- MapReduce服务_什么是存算分离_如何配置MRS集群存算分离
- MapReduce服务_什么是Flume_如何使用Flume
- 华为云资料 2021年 4月刊