检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
基于Serverless版事件流实现Kafka实例之间的数据同步 本文介绍如何应用事件网格EventGrid的Serverless版事件流功能实现分布式消息服务Kafka版实例间的数据同步。 当前事件网格服务仅支持华北-北京四、华北-乌兰察布一、华东-上海一、华东-上海二、华南-广州、亚太-新加坡、拉美-墨西哥城二。
基于EventGrid事件订阅和Function实现OBS桶数据同步 方案概述 操作流程 实施步骤
在OBS目标桶查看对象是否已完成同步 该数据同步功能默认同步后路径一致，在目标桶桶目录下查看文件是否同步成功： 图1 目标桶目录 父主题： 实施步骤
场景类型 可选“同步”或“迁移”。 同步：实现数据源之间的数据实时同步，支持正向和反向的长期单向数据同步。 迁移：适用于业务割接期数据的整体搬迁上云，只支持短期单向同步。 描述 请输入对本作业的描述。 单击“下一步：源和目标对象配置”，进入“源和目标对象配置”页面。 “源数据”和“目标
在事件追踪中查看事件投递信息 在EG控制台界面，单击“事件通道”中对应的事件通道的“事件轨迹”可以看到该事件的投递详情和事件详情： 界面入口： 图1 界面入口 事件详情： 图2 事件详情 事件轨迹： 图3 事件轨迹 父主题： 实施步骤
发送OBS事件 目前支持的事件类型。 图1 支持类型 事件类型中描述的事件（如上传、覆盖），在OBS中触发后，根据事件订阅中事件类型的选择，可对该事件进行路由传递。例如在桶名为test_zzy的OBS源桶中上传“test930.png”文件，目录为“success”。 图2 OBS桶列表
端topic的“消息体”。 图3 目标端消息 图4 源端消息 如消息一致，则Kafka实例间的数据同步成功。 父主题： 基于Serverless版事件流实现Kafka实例之间的数据同步
方案概述 本文介绍如何通过事件网格服务的事件订阅和函数服务实现OBS桶的数据同步。 方案架构 本实践事件订阅架构图如下所示： 图1 事件订阅架构图 当前事件网格服务仅支持华北-北京四、华北-乌兰察布一、华东-上海一、华东-上海二、华南-广州、亚太-新加坡、拉美-墨西哥城二。 父主题：
在函数服务的监控中查看代码执行详情 在“函数列表”中找到进行数据同步的函数： 图1 函数列表 单击监控中对应的请求查看代码日志： 图2 代码日志 父主题： 实施步骤
场景类型 可选“同步”或“迁移”。 同步：实现数据源之间的数据实时同步，支持正向和反向的长期单向数据同步。 迁移：适用于业务割接期数据的整体搬迁上云，只支持短期单向同步。 描述 请输入对本作业的描述。 单击“下一步：源和目标对象配置”，进入“源和目标对象配置”页面。 “源数据”和“目标
参数配置说明 参数 说明 选择提供方 请选择“华为云”。 事件目标 请选择“FunctionGraph（函数计算）”。 函数 选择创建的OBS数据同步的函数。 版本 按需选择。 执行方式 按需选择。 委托 选择委托。如无委托，可单击旁边的“创建委托”进行创建，将会创建名为“EG_TARGET_AGENCY”委托。
场景类型 可选“同步”或“迁移”。 同步：实现数据源之间的数据实时同步，支持正向和反向的长期单向数据同步。 迁移：适用于业务割接期数据的整体搬迁上云，只支持短期单向同步。 描述 请输入对本作业的描述。 单击“下一步：源和目标对象配置”，进入“源和目标对象配置”页面。 图1 源数据和目标数据配置
在事件追踪中查看事件投递信息 在函数服务的监控中查看代码执行详情 在OBS目标桶查看对象是否已完成同步 父主题： 基于EventGrid事件订阅和Function实现OBS桶数据同步
上海一、华东-上海二、华北-北京四、华南-广州、亚太-新加坡、拉美-墨西哥城二。 父主题： 基于Serverless版事件流实现Kafka实例之间的数据同步
事件网格与所在区域保持一致。 桶名称 输入示例如“eg-test”。 默认存储类别 按需选择。 桶策略 按需选择。 默认加密 按需选择。 归档数据直读 按需选择。 企业项目 按需选择。 配置完成后，单击“立即创建”，根据提示信息完成桶的创建。 以上述流程构建源桶与目标桶。 父主题： 实施步骤
创建FG函数 本章节提供实现图片压缩功能的程序包，使用空白模板创建函数，样例代码请参见使用函数压缩图片。 创建函数（创建函数的时候，必须选择包含OBS访问权限的委托，否则不能使用OBS服务）。 登录函数工作流控制台，在左侧导航栏选择“函数 > 函数列表”，进入函数列表界面。 单击“创建函数”，进入创建函数流程。
支持通过多种网络链路，实现跨云平台数据同步、云下数据同步上云或云上跨Region的数据同步等多种业务场景。适用于业务割接期数据的整体搬迁上云，支持短期单向同步。 特点：通过增量同步技术，业务运行中可以完成数据库同步，同步不影响业务。 同步 实现数据源之间的数据实时同步, 可作为MAS容灾方案原子能力，实现跨Region
已在OBS开通白名单（联系OBS服务）。 实践流程 创建事件订阅和事件路由流程如下图所示： 图1 流程图 父主题： 基于EventGrid事件订阅和Function实现OBS桶数据同步
事件流作为一种更为实时、轻量和高效的端到端的流式数据处理通道，对事件源产生的事件实时拉取、过滤及转换，并路由至事件目标。源端分布式消息Kafka版生产的消息可以通过事件流这个通道被路由到目标端的分布式消息Kafka版，无需定义事件网格。详情请参见事件流概述。 父主题： 基于Serverless版事件流实现Kafka实例之间的数据同步
云上云下、跨云厂商需用户侧拉专线。 相关监控指标 2023年9月30日上线。 父主题： 基于Serverless版事件流实现Kafka实例之间的数据同步
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
