检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
基于Serverless版事件流实现Kafka实例之间的数据同步 本文介绍如何应用事件网格EventGrid的Serverless版事件流功能实现分布式消息服务Kafka版实例间的数据同步。 当前事件网格服务仅支持华北-北京四、华北-乌兰察布一、华东-上海一、华东-上海二、华南-广州、亚太-新加坡、拉美-墨西哥城二。
发送OBS事件 目前支持的事件类型。 图1 支持类型 事件类型中描述的事件(如上传、覆盖),在OBS中触发后,根据事件订阅中事件类型的选择,可对该事件进行路由传递。例如在桶名为test_zzy的OBS源桶中上传“test930.png”文件,目录为“success”。 图2 OBS桶列表
在函数服务的监控中查看代码执行详情 在“函数列表”中找到进行数据同步的函数: 图1 函数列表 单击监控中对应的请求查看代码日志: 图2 代码日志 父主题: 实施步骤
配置专业版事件流作业 登录事件网格控制台,本章节以配置Kafka事件流作业为例介绍。 在左侧导航栏选择“事件流>专业版事件流作业”,进入“专业版事件流作业”页面。 先停用事件流作业,再单击操作列“修改配置”按钮,进入“基础配置”页面,此处只能修改“作业名称”和“描述”。 单击“下
专业版事件流预检查 当前仅支持华南-广州、华东-上海一。 预检查是创建事件流作业流程中的一环,用来检查用户填写的配置信息是否符合要求。预检查包含多个检查项,详情请参考表1,且每项检查独立执行,检查结果分成功、失败和告警三种类型。 表1 检查项目介绍 项目 内容 源端和目标端实例版本检查
权限管理 创建用户并授权使用EG EG自定义策略
事件规则 事件规则概述 过滤规则参数说明 过滤规则示例 事件内容转换
事件目标 路由到函数工作流 路由到分布式消息服务Kafka版 路由到对象存储服务OBS 父主题: 事件流
事件流 Serverless版事件流概述 事件源 事件规则 事件目标 管理Serverless版事件流 监控 专业版事件流
RocketMQ采集函数错误码 错误码 错误码说明 运维说明 操作建议 200 心跳成功 设置事件流状态为RUNNING,清除告警。 正常提示。 601 未知致命异常 设置事件流状态为ERROR,上报告警,自动重启事件流。 建议联系华为工程师处理。 602 网络异常 502 消费者不存在
专业版事件流作业 创建专业版事件流作业 删除专业版事件流作业 启用专业版事件流作业 停用专业版事件流作业 配置专业版事件流作业 父主题: 专业版事件流
基于EventGrid事件订阅和Function实现OBS桶数据同步 方案概述 操作流程 实施步骤
实施步骤 创建OBS源桶和目标桶 创建FG函数 创建EG事件订阅 发送OBS事件 在事件追踪中查看事件投递信息 在函数服务的监控中查看代码执行详情 在OBS目标桶查看对象是否已完成同步 父主题: 基于EventGrid事件订阅和Function实现OBS桶数据同步
创建OBS源桶和目标桶 登录OBS控制台。 单击“创建桶”,进入“创建桶”页面。 设置桶参数。关于桶参数的详细介绍,请参考创建桶。 表1 桶参数配置 参数 说明 区域 事件网格与所在区域保持一致。 桶名称 输入示例如“eg-test”。 默认存储类别 按需选择。 桶策略 按需选择。
创建FG函数 本章节提供实现图片压缩功能的程序包,使用空白模板创建函数,样例代码请参见使用函数压缩图片。 创建函数(创建函数的时候,必须选择包含OBS访问权限的委托,否则不能使用OBS服务)。 登录函数工作流控制台,在左侧导航栏选择“函数 > 函数列表”,进入函数列表界面。 单击“创建函数”,进入创建函数流程。
3分钟创建一个游戏类容器应用 3分钟创建一个游戏类容器应用 05 API 事件网格提供了REST(Representational State Transfer)风格API,支持您通过HTTPS请求调用。 API文档 API 参考 02 购买 弹性云服务器(Elastic Cloud
能否将自定义事件推送到EventGrid? 可以。 您可以将自定义事件以CloudEvents V1.0的格式要求进行封装,并通过API将其发送到EventGrid。 请参考自定义事件发送流程,将自定义事件推送到EventGrid。
MRS:Cluster:JobAction MapReduce服务 MRS OPENAPI 3.0 MRS作业事件,仅限页面或API提交的作业。 MRS:Cluster:OperationAction MapReduce服务 MRS OPENAPI 3.0 MRS集群活动事件,例如集群创建和删除等。 OB
获取并安装IntelliJ IDEA,如果未安装,请至IntelliJ IDEA官方网站下载。 在pom.xml中加入依赖。如何在Java环境中集成API请求签名的SDK请参考AK/SK签名认证操作指导。 <dependency> <groupId>io.cloudevents</groupId>
产品优势 开放兼容 兼容CloudEvents 1.0协议和OpenSchema 1.0协议。 支持CloudEvents SDK和API。 高并发&高可用 支持千万级事件并发。 服务可用性99.99%,采用分布式集群化部署,具备极强的容灾能力。 安全可靠 对接统一身份认证服务、