-
配置Kafka自动创建Topic - 分布式消息服务Kafka版
批处理消息最大值为10485760字节。 配置Kafka自动创建Topic 登录管理控制台。 在管理控制台左上角单击,选择区域。 请选择Kafka实例所在的区域。 在管理控制台左上角单击,选择“应用中间件 > 分布式消息服务Kafka版”,进入分布式消息服务Kafka专享版页面。 单击Kafka实例名称,进入“基本信息”页面。
-
Kafka客户端参数配置建议 - 分布式消息服务Kafka版
注意,这些重试与客户端接收到发送错误时的重试没有什么不同。允许重试将潜在的改变数据的顺序,如果这两个消息记录都是发送到同一个partition,则第一个消息失败第二个发送成功,则第二条消息会比第一条消息出现要早。 针对网络闪断场景,生产者建议配置重试能力,推荐重试次数retries=3,重试间隔retry.backoff
-
Kafka实例的内网连接地址可以修改吗? - 分布式消息服务Kafka版
Kafka实例的内网连接地址可以修改吗? 不支持修改,且不支持指定IP地址。 父主题: 连接问题
-
查询用户/客户端流控配置 - 分布式消息服务Kafka版
huaweicloud.sdk.kafka.v2.region.KafkaRegion; import com.huaweicloud.sdk.kafka.v2.*; import com.huaweicloud.sdk.kafka.v2.model.*; public class
-
配置Kafka实例的明文/密文接入 - 分布式消息服务Kafka版
在管理控制台左上角单击,选择“应用中间件 > 分布式消息服务Kafka版”,进入分布式消息服务Kafka专享版页面。 单击Kafka实例的名称,进入实例的“基本信息”页面。 密文接入分为内网访问密文接入和公网访问密文接入,开启密文接入方法如表2所示。 表2 开启密文接入方法 接入方式 开启密文接入
-
配置Kafka实例标签 - 分布式消息服务Kafka版
标签键 不能为空。 对于同一个实例,Key值唯一。 长度为1~128个字符(中文也可以输入128个字符)。 由任意语种字母、数字、空格和字符组成,字符仅支持_ . : = + - @ 首尾字符不能为空格。 标签值 长度为0~255个字符(中文也可以输入255个字符)。 由任意语种字母、数字、空格和字符组成,字符仅支持_
-
删除用户/客户端流控配置 - 分布式消息服务Kafka版
huaweicloud.sdk.kafka.v2.region.KafkaRegion; import com.huaweicloud.sdk.kafka.v2.*; import com.huaweicloud.sdk.kafka.v2.model.*; public class
-
创建用户/客户端流控配置 - 分布式消息服务Kafka版
huaweicloud.sdk.kafka.v2.region.KafkaRegion; import com.huaweicloud.sdk.kafka.v2.*; import com.huaweicloud.sdk.kafka.v2.model.*; public class
-
配置Kafka客户端 - 分布式消息服务Kafka版
配置Kafka客户端 Kafka客户端参数配置建议 Kafka客户端使用建议 父主题: 连接实例
-
连接Kafka网络要求 - 分布式消息服务Kafka版
网通过同一个VPC访问Kafka实例,无需添加表2的规则。 表2 安全组规则 方向 协议 端口 源地址 说明 入方向 TCP 9094 0.0.0.0/0 通过公网访问Kafka实例(关闭SSL加密)。 入方向 TCP 9092 0.0.0.0/0 使用内网通过同一个VPC访问Kafka实例(关闭SSL加密)。
-
修改用户/客户端流控配置 - 分布式消息服务Kafka版
huaweicloud.sdk.kafka.v2.region.KafkaRegion; import com.huaweicloud.sdk.kafka.v2.*; import com.huaweicloud.sdk.kafka.v2.model.*; public class
-
Logstash对接Kafka生产消费消息 - 分布式消息服务Kafka版
conf”配置文件。 图7 创建“input.conf”配置文件 在“input.conf”配置文件中,增加如下内容,连接Kafka实例。 input { kafka { bootstrap_servers => "ip1:port1,ip2:port2,ip3:port3"
-
配置Kafka访问控制 - 分布式消息服务Kafka版
配置Kafka访问控制 配置Kafka实例的明文/密文接入 制作和替换Kafka的SSL证书 配置Kafka的SSL双向认证 配置Kafka用户 父主题: 连接实例
-
配置Kafka网络连接 - 分布式消息服务Kafka版
配置Kafka网络连接 连接Kafka网络要求 配置Kafka实例的公网访问 使用VPCEP实现跨VPC访问Kafka 使用DNAT实现公网访问Kafka 父主题: 连接实例
-
配置消息堆积数监控 - 分布式消息服务Kafka版
配置消息堆积数监控 操作场景 如果您想要在消费组的消息堆积数超过阈值时,通过短信/邮件及时收到通知信息,可以参考本章节设置告警通知。 您还可以参考本章节为分布式消息服务Kafka版的其他监控指标设置告警通知。 前提条件 已购买Kafka实例、创建Topic,并且已成功消费消息。 操作步骤
-
创建Kafka Topic - 分布式消息服务Kafka版
> 分布式消息服务Kafka版”,进入分布式消息服务Kafka专享版页面。 单击Kafka实例的名称,进入实例详情页面。 在左侧导航栏选择“Topic管理”,单击“创建Topic”,弹出“创建Topic”对话框。 图1 创建Topic 填写Topic名称和配置信息。 表1 Topic参数说明
-
与其他云服务的关系 - 分布式消息服务Kafka版
通过公网访问Kafka实例。 标签管理服务(Tag Management Service) 标签管理服务是一种快速便捷将标签集中管理的可视化服务,提供跨区域、跨服务的集中标签管理和资源分类功能。 为Kafka实例添加标签,可以方便用户识别和管理拥有的实例资源。
-
查看监控指标与配置告警 - 分布式消息服务Kafka版
查看监控指标与配置告警 查看Kafka监控数据 Kafka支持的监控指标 配置Kafka监控告警
-
使用客户端连接Kafka(明文接入) - 分布式消息服务Kafka版
访问未开启密文接入的Kafka实例时,实例需要配置正确的安全组规则,具体安全组配置要求,请参考表2。 已获取连接Kafka实例的地址。 如果是使用内网通过同一个VPC访问,实例端口为9092,实例连接地址获取如下图。 图1 使用内网通过同一个VPC访问Kafka实例的连接地址(实例未开启SASL) 图2 使用内网通
-
Topic是否支持ACL权限配置? - 分布式消息服务Kafka版
Topic是否支持ACL权限配置? Kafka实例已开启Kafka SASL_SSL功能,此时Topic支持配置ACL权限。在Kafka控制台的“Topic管理”页面,在需要设置用户权限的Topic所在行,单击“设置用户权限”,为用户设置不同的权限。 具体操作请参考设置Topic权限。