检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
0 2.1.0 前提条件 执行实施步骤前,请确保已完成以下操作: 下载Logstash。 准备一台Windows系统的主机,在主机中安装Java Development Kit 1.8.111或以上版本和Git Bash。 创建Kafka实例和Topic,并获取Kafka实例信息。
"log_end_offset" : "3", "lag" : "0" } ] } ] } SDK代码示例 SDK代码示例如下。 Java Python Go 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20
"task_id" : "2962882a-386c-4c9d-bb59-3b4f55d82961" } SDK代码示例 SDK代码示例如下。 Java Python Go 创建一个转储任务,转储topic-test中的数据到OBS。 1 2 3 4 5 6 7 8 9
"connector_id" : "55b78880-9077-4c74-ad5a-6868555f76a4" } SDK代码示例 SDK代码示例如下。 Java Python Go 更多 新规格按需实例的开启Smart Connect,设置Smart Connect节点数量为2。 1 2 3
"partition" : 0, "timestamp" : 1571812144000 } 响应示例 无 SDK代码示例 SDK代码示例如下。 Java Python Go 更多 重置的消费进度到指定偏移量。 1 2 3 4 5 6 7 8 9 10 11 12 13 14
"partition" : 0, "timestamp" : 1571812144000 } 响应示例 无 SDK代码示例 SDK代码示例如下。 Java Python Go 重置的消费进度到指定偏移量。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
} { "retention_policy" : "time_base" } 响应示例 无 SDK代码示例 SDK代码示例如下。 Java Python Go 更多 修改实例的名称和描述。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
Go 本文以Linux CentOS环境为例,介绍Go 1.16.5版本的Kafka客户端连接指导,包括demo代码库的获取,以及生产、消费消息。 使用前请参考收集连接信息收集Kafka所需的连接信息。 准备环境 执行以下命令,检查是否已安装Go。 go version 返回如下回显时,说明Go已经安装。
访问Kafka Manager Kafka Manager是开源的Kafka集群管理工具,需要通过浏览器才能访问Kafka Manager的地址。在Kafka Manager页面,您可以查看Kafka集群的监控、代理等信息。 2023年5月17日及以后创建的实例不提供Kafka
删除Kafka消息 本章节介绍如何在控制台删除Topic中存储的消息。 约束与限制 消息删除后无法恢复,请谨慎操作。 前提条件 删除消息前,请先在消费代码中设置“auto.offset.reset”参数。“auto.offset.reset”用来指定当Kafka中没有初始偏移量或
审计与日志 云审计服务(Cloud Trace Service,简称CTS),是华为云安全解决方案中专业的日志审计服务,提供对各种云资源操作记录的收集、存储和查询功能,可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。 用户开通云审计服务并创建和配置追踪器后,CTS可记录DMS
返回结果 状态码 请求发送以后,您会收到响应,包含状态码、响应消息头和消息体。 状态码是一组从1xx到5xx的数字代码,状态码表示了请求响应的状态,完整的状态码列表请参见状态码。 对于管理员创建IAM用户接口,如果调用后返回状态码为“201”,则表示请求成功。 响应消息头 对应请
为什么不建议使用Sarama客户端收发消息? 问题现象 使用Sarama客户端收发消息可能存在以下问题: Sarama客户端无法感知分区变化,当Topic分区数增加时,需要重启客户端后才能正常消费。 Sarama客户端消息最大处理时间(MaxProcessingTime)默认值为
选择和配置安全组 Kafka实例支持使用内网通过同一个VPC访问、跨VPC访问、通过DNAT访问和公网访问,访问实例前,需要配置安全组。 使用内网通过同一个VPC访问实例 客户端和实例是否使用相同的安全组? 是,如果保留了创建安全组后,系统默认添加的入方向“允许安全组内的弹性云服
构造请求 本节介绍REST API请求的组成,并以调用IAM服务的管理员创建IAM用户来说明如何调用API。 您还可以通过这个视频教程了解如何构造请求调用API:https://bbs.huaweicloud.com/videos/102987。 请求URI 请求URI由如下部分组成。
"status" : "RUNNING", "create_time" : 1708427753133 } SDK代码示例 SDK代码示例如下。 Java Python Go 更多 创建一个立即启动的转储任务。 1 2 3 4 5 6 7 8 9 10 11 12 13 14
为什么删除消费组不生效? 可能原因:您开启了自动创建消费组功能,且您的业务正在连接该消费组消费消息。所以,如果没有停止您的业务,删除了消费组后,消费消息时还是会自动创建该消费组。 解决办法:关闭自动创建消费组功能,即在Kafka控制台的“配置参数”页面,把“auto.create
Python 本文以Linux CentOS环境为例,介绍Python版本的Kafka客户端连接指导,包括Kafka客户端安装,以及生产、消费消息。 使用前请参考收集连接信息收集Kafka所需的连接信息。 准备环境 Python 一般系统预装了Python,您可以在命令行输入py
漏洞修复策略 漏洞修复周期 高危漏洞: Kafka社区发现漏洞并发布修复方案后,分布式消息服务Kafka版一般在1个月内进行修复,修复策略与社区保持一致。 操作系统紧急漏洞按照操作系统修复策略和流程对外发布,一般在一个月内提供修复方案,用户自行修复。 其他漏洞: 按照版本正常升级流程解决。
状态码 状态码如表1所示 表1 状态码 状态码 编码 错误码说明 100 Continue 继续请求。 这个临时响应用来通知客户端,它的部分请求已经被服务器接收,且仍未被拒绝。 101 Switching Protocols 切换协议。只能切换到更高级的协议。 例如,切换到HTTP的新版本协议。