MAPREDUCE服务 MRS-创建FlinkServer作业写入数据至Kafka消息队列:WITH主要参数说明
WITH主要参数说明
配置项 |
是否必选 |
类型 |
描述 |
---|---|---|---|
connector |
必选 |
String |
指定要使用的连接器,Kafka使用“kafka” |
topic |
|
String |
主题名称
|
topic-pattern |
kafka作为source时可选 |
String |
主题模式 当表用作source时可设置该参数,主题名称需使用正则表达式
说明:
不能同时设置“topic-pattern” 和“topic” 。 |
properties.bootstrap.servers |
必选 |
String |
Kafka broker列表,以逗号分隔 |
properties.group.id |
kafka作为source时必选 |
String |
Kafka的使用者组ID |
format |
必选 |
String |
用于反序列化和序列化Kafka消息的值部分的格式 |
properties.* |
可选 |
String |
安全模式下需增加认证相关的参数 |
scan.topic-partition-discovery.interval |
可选 |
Duration |
消费者定时动态发现创建的Partition的时间间隔。默认值:5min。 |
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- 大数据分析是什么_使用MapReduce_创建MRS服务
- MapReduce服务_什么是Kafka_如何使用Kafka
- MapReduce服务_什么是Flume_如何使用Flume
- 什么是弹性资源池_数据湖探索DLI弹性资源池
- 什么是Flink OpenSource SQL_数据湖探索_Flink OpenSource SQL
- ModelArts模型训练_创建训练作业_如何创建训练作业
- MapReduce工作原理_MapReduce是什么意思_MapReduce流程_MRS_华为云
- MapReduce服务_什么是Flink_如何使用Flink
- Kafka与其他消息队列的对比_什么是Kafka_分布式消息系统-华为云