-
查询指定实例 - 分布式消息服务Kafka版
kafka.cluster.c3.high.2:Kafka实例的基准带宽为1200MByte/秒。 charging_mode Integer 付费模式,1表示按需计费,0表示包年/包月计费。 vpc_id String VPC ID。 vpc_name String VPC的名称。 created_at
-
Kafka客户端参数配置建议 - 分布式消息服务Kafka版
算消息发送成功。acks参数代表了数据备份的可用性。常用选项: acks=0:表示producer不需要等待任何确认收到的信息,副本将立即加到socket buffer并认为已经发送。没有任何保障可以保证此种情况下server已经成功接收数据,同时重试配置不会发生作用(因为客户
-
修改Kafka分区平衡 - 分布式消息服务Kafka版
分区平衡任务启动后,无法手动停止任务,需要等到任务完成。 已设置了一个定时分区平衡任务,在此任务未执行前,无法对本实例内的任何Topic执行其他分区平衡任务。 分区平衡后Topic的metadata会改变,如果生产者不支持重试机制,会有少量的请求失败,导致部分消息生产失败。 数据量大的Topic进行分区平衡的时
-
查询所有实例列表 - 分布式消息服务Kafka版
kafka.cluster.c3.high.2:Kafka实例的基准带宽为1200MByte/秒。 charging_mode Integer 付费模式,1表示按需计费,0表示包年/包月计费。 vpc_id String VPC ID。 vpc_name String VPC的名称。 created_at
-
配置Kafka监控告警 - 分布式消息服务Kafka版
连续触发次数:1 告警级别:重要 该指标用于统计消费组指定队列可以消费的消息个数。 出现该告警时,首先排查消费者代码逻辑是否有误,例如消费者出现了异常不再消费等。其次,可以考虑加快消息的消费,例如增加队列消费者,并确保分区数大于或等于消费者数。 配置Kafka监控告警 登录管理控制台。
-
约束与限制 - 分布式消息服务Kafka版
不建议使用单副本。实例节点出现故障的情况下,单副本Topic查询消息时可能会报“内部服务错误”,因此不建议使用单副本Topic。 老化时间 如果Topic已经设置了老化时间,此时“配置参数”中的log.retention.hours值将不对此Topic生效。仅在Topic中未设置老化时间时,“配置参数”中的log
-
产品规格 - 分布式消息服务Kafka版
Kafka实例支持对存储进行扩容,根据业务增长,随时扩容,节约成本。 Kafka实例Topic数量计算 Kafka实例对Topic分区数之和设置了上限,当达到上限之后,用户无法继续创建Topic。 所以,Topic数量和实例分区数上限、每个Topic的分区数有关,其中,每个Topic分
-
创建Smart Connect任务 - 分布式消息服务Kafka版
示) target_db Integer 目标数据库,默认为-1。(仅目标端类型为Redis时会显示) consumer_strategy String 转储启动偏移量,latest为获取最新的数据,earliest为获取最早的数据。(仅目标端类型为OBS时会显示) destination_file_type
-
查询产品规格列表 - 分布式消息服务Kafka版
账单计费类型。 arch_types Array of strings CPU架构。 charging_mode Array of strings 计费模式。monthly:包年/包月类型。hourly:按需类型。 ios Array of ListEngineIosEntity objects
-
创建Kafka实例 - 分布式消息服务Kafka版
点个数的倍数。 publicip_id String 否 实例绑定的弹性IP地址的ID。 以英文逗号隔开多个弹性IP地址的ID。 如果开启了公网访问功能(即enable_publicip为true),该字段为必选。 ssl_enable Boolean 否 是否打开SSL加密访问。
-
查询实例的扩容规格列表 - 分布式消息服务Kafka版
arch_types Array of strings 支持的CPU架构类型。 charging_mode Array of strings 支持的计费模式类型。 ios Array of ExtendProductIosEntity objects 磁盘IO信息。 support_features
-
Java客户端接入示例 - 分布式消息服务Kafka版
为了方便,下文分生产与消费两个配置文件介绍。其中涉及SASL认证配置,如果Kafka实例没有开启SASL,使用的是不加密连接,请注释相关代码;如果Kafka实例开启了SASL,则必须使用加密方式连接,请设置相关参数。 生产消息配置文件(对应生产消息代码中的dms.sdk.producer.properties文件)
-
修改实例信息 - 分布式消息服务Kafka版
获取方法如下:登录虚拟私有云服务的控制台界面,在安全组的详情页面查找安全组ID。 retention_policy 否 String 容量阈值策略。 支持两种策略模式: produce_reject: 生产受限 time_base: 自动删除 enterprise_project_id 否 String
-
消息堆积处理建议 - 分布式消息服务Kafka版
议消费者数和分区数保持一致。 提高消费者的消费速度,通过优化消费者处理逻辑(减少复杂计算、第三方接口调用和读库操作),减少消费时间。 增加消费者每次拉取消息的数量:拉取数据/处理时间 >= 生产速度。 生产者端 生产消息时,给消息Key加随机后缀,使消息均衡分布到不同分区上。 在