检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
基于Serverless版事件流实现Kafka实例之间的数据同步 本文介绍如何应用事件网格EventGrid的Serverless版事件流功能实现分布式消息服务Kafka版实例间的数据同步。 当前事件网格服务仅支持华北-北京四、华北-乌兰察布一、华东-上海一、华东-上海二、华南-广州、亚太-新加坡、拉美-墨西哥城二。
事件轨迹 本章节介绍在事件网格控制台如何追踪事件轨迹。 您可以通过事件轨迹功能,追踪查询72小时内的事件源、事件详情、投递目标及投递状态等相关信息。 事件轨迹当前支持局点:上海一、上海二、北京四、华北-乌兰察布一、华南-广州。 约束与限制 投递失败的事件详情可在72小时内查询到,投
当选择“正则匹配”时需在下方输入“Topic正则”。 当选择“精确匹配”时需选择“Topics”。 副本数 是。 自动创建的Topic副本数,不能超过目标端Kafka的Broker数量。 同步消费进度 是。 说明: 开启时表示将消息消费进度同步到目标Kafka。 启动偏移量 否。 压缩算法
角色时,可能需要一并授予依赖的其他角色,才能正确完成业务。角色并不能满足用户对精细化授权的要求,无法完全达到企业对权限最小化的安全管控要求。 策略:IAM最新提供的一种细粒度授权的能力,可以精确到具体服务的操作、资源以及请求条件等。基于策略的授权是一种更加灵活的授权方式,能够满足
CloudEvents SDK 常见问题 了解更多常见问题、案例和解决方案 热门案例 事件网格如何收费? 事件发布失败的原因? 事件目标未被触发的原因? 能否将自定义事件推送到EventGrid? 如何过滤最终传输到事件目标的事件? 如何将自定义的事件内容传输到事件目标? 更多 远程登录 应用容器化改造介绍
failed_count Integer 操作失败的订阅个数 events Array of events objects 事件列表 表6 events 参数 参数类型 描述 error_code String 失败的错误码 error_msg String 失败的原因 subscription_id
failed_count Integer 发布失败的事件个数 events Array of events objects 事件列表 表7 events 参数 参数类型 描述 error_code String 发布失败的错误码 error_msg String 发布失败的原因 event_id String
EventSubMetricsItem 参数 参数类型 描述 fail_num Long 失败数 retry_success_num Long 重试成功数 retry_fail_num Long 重试失败数 retry_times Integer 重试数 timestamp Long 时间戳
failed_count Integer 发布失败的事件个数 events Array of events objects 事件列表 表7 events 参数 参数类型 描述 error_code String 发布失败的错误码 error_msg String 发布失败的原因 event_id String
服务器在完成请求时发生冲突。 返回该状态码,表明客户端尝试创建的资源已经存在,或者由于冲突请求的更新操作不能被完成。 410 Gone 客户端请求的资源已经不存在。 返回该状态码,表明请求的资源已被永久删除。 411 Length Required 服务器无法处理客户端发送的不带Content-Length的请求信息。
创建访问端点成功后,不支持修改虚拟私有云和子网。 如果您删除私网访问端点时出现删除失败的情况,可能是私网访问端点所依赖的DNS、VPCEP等相关资源已被删除,此时您需要联系EG运维人员处理。 创建私网访问端点 在创建私网访问端点前,您需要具备DNS、VPCEP的服务权限。 登录事件网格控制台。
前支持2.7及以上,后续支持版本会持续更新。 源Kafka和目标Kafka实例的规格、存储空间需保持一致。 确保vpc、子网、kafka等资源充足。 确保源端和目标端实例与用户创建事件流集群时选择的VPC网络互通。 创建VPC和子网的操作指导请参考创建虚拟私有云和子网。 操作步骤
0 counts 事件订阅 1分钟 process_time 处理时间 该指标用于统计事件投递的周期内平均总处理时间。 单位:毫秒 ≥ 0 ms 事件订阅 1分钟 fail_num 失败数量 该指标用于统计事件投递失败且无需重试的事件数量。 单位:个 ≥ 0 counts 事件订阅
request_uuid-timestamp-hostname. 表6 响应Body参数 参数 参数类型 描述 failed_count Integer 预校验发布事件失败的个数 sources Array of CheckPutEventsResult objects 表7 CheckPutEventsResult
该指标为单位时间处理事件成功率 0-100% 事件流 1分钟 streaming_failed_num 处理事件失败数量 该指标为单位时间处理事件失败数量 ≥ 0 事件流 1分钟 streaming_failed_rate 处理事件失败率 该指标为单位时间处理事件失败率 0-100% 事件流
pub_failed_num 接入事件失败数量 该指标为单位时间通道接入失败数量 ≥ 0 事件通道 1分钟 pub_failed_rate 接入事件失败率 该指标为单位时间通道接入事件失败率 0-100% 事件通道 1分钟 pub_process_time 接入事件平均处理耗时 该指标为单位时间通道接入事件平均处理耗时
0-100% 事件订阅 1分钟 sub_failed_num 投递事件失败数量 该指标为单位时间订阅投递事件失败数量 ≥ 0 事件订阅 1分钟 sub_failed_rate 投递事件失败率 该指标为单位时间订阅投递事件失败率 0-100% 事件订阅 1分钟 sub_retry_num 投递事件重试数量
支持对象选择、全量+增量同步和多种压缩模式,满足不同同步诉求。 预检查 预检查支持提前识别同步是否满足成功条件,提供失败原因、失败详情和处理建议信息。用户可以根据失败信息和处理建议的指导,调整环境,以确保同步成功。 同步监控 全面可观测/可维护性,支持流控,同步情况,尽在掌握之中。 父主题:
作用(因为客户端不知道是否失败)回馈的offset会总是设置为-1。 acks=1:这意味着至少要等待leader已经成功将数据写入本地log,但是并没有等待所有follower是否成功写入。如果follower没有成功备份数据,而此时leader又无法提供服务,则消息会丢失。
subscriptionName String 订阅名称 successCounts Integer 成功目标个数 failCounts Integer 失败目标个数 allDeliverTimes Integer 共投递次数 deliverTargetList Array of DeliverTarget