检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建数据订阅任务 支持的数据库 表1 支持数据库信息 数据库引擎 支持订阅的数据类型 RDS for MySQL 5.6、5.7版本 数据更新 结构更新 由于订阅任务当前存在较多订阅对象和操作约束,推荐使用性能、稳定性更高的MySQL到Kafka同步链路进行数据订阅。 数据订阅与M
查看订阅数据 数据复制服务支持通过管理控制台在线查看增量订阅数据,能够查看的时间范围为订阅任务的数据范围(不含视图和存储过程的数据)。 本小节介绍在线查看订阅数据的方式,及数据记录的各个字段的含义。 前提条件 已登录数据复制服务管理控制台。 已成功创建数据订阅任务。 操作步骤 在
数据订阅 支持的数据源类型 数据订阅支持的数据源类型包括: RDS for MySQL实例 支持的订阅对象 数据订阅的订阅对象可以为:表级订阅。 数据订阅将增量数据细分为数据变更(Data Manipulation Language 简称DML)和结构变更(Data Definition
数据订阅 修改数据库后,到SDK的用户端消费一般有多长时间的延迟 订阅SDK获取不到数据,且程序异常
续传订阅任务 对于失败的数据订阅任务,用户可在解决任务异常场景后,采用续传功能,继续进行数据传输,无需重新开始。 前提条件 已登录数据复制服务控制台。 操作步骤 在“数据订阅管理”页面的任务列表中,选择要续传的任务,单击操作列“续传”按钮,继续进行数据传输。 父主题: 任务管理
删除订阅任务 您可选择删除订阅任务。被删除后的任务将不会再出现在任务列表中,请谨慎操作。 前提条件 已登录数据复制服务控制台。 删除任务 在“数据订阅管理”页面的任务列表中,选择要删除的任务,单击“删除”。 单击“是”,提交删除任务。 批量删除 在“数据订阅管理”页面,选择需要删除的任务,
重置订阅任务 对于不确定因素导致的失败任务,当前任务中断时间过长,任务无法续传时,可使用重置功能,从当前时间点重新进行数据订阅,可以无需重新配置。 约束限制 任务重置并启动后,任务的开始时间点为当前时间,并非任务创建时间。 操作步骤 在“数据订阅管理”页面的任务列表中,选择要重置的任务,单击操作列“重置”按钮。
编辑订阅任务 数据复制服务支持编辑数据订阅任务的配置信息,包括源库信息、目标库信息。创建实例后,对于如下状态的任务,您可进行编辑并提交订阅任务。 配置 前提条件 已登录数据复制服务控制台。 操作步骤 在“数据订阅管理”页面的任务列表中,选择要修改的任务,单击操作列“编辑”按钮。
订阅SDK获取不到数据,且程序异常 问题现象 创建DRS数据订阅任务,使用订阅SDK获取不到数据,且程序异常。 排查方法 订阅SDK接口排查:查看SDK接口中参数填写是否准确,详细可查看SDK接口介绍。 网络排查:目前数据订阅仅支持VPC网络,但是不支持VPC内的容器网络。如果客
任务管理 查看任务详情 修改任务信息 编辑订阅任务 查看订阅数据 修改消费时间点 续传订阅任务 重置订阅任务 删除订阅任务 任务状态说明
签。 编辑标签 在“数据订阅管理”页面,选择指定的数据订阅任务,单击任务名称进入“基本信息”页签。 在左侧导航栏,单击“标签”。 在“标签”页签,单击“添加/编辑标签”,在弹出框中修改标签,单击“确定”。 删除标签 在“数据订阅管理”页面,选择指定的数据订阅任务,单击任务名称进入“基本信息”页签。
查看任务详情 数据订阅任务的配置信息,包括任务信息、订阅源信息。订阅任务创建成功后,可查看任务详细信息 。 前提条件 已登录数据复制服务控制台。 操作步骤 任务列表中,仅展示当前登录用户所创建的全部任务,同一租户下的不同用户之间的任务不可见。 在“数据订阅管理”界面,选择指定的数据订阅任务,单击任务名称。
任务状态说明 数据订阅提供了多种任务状态,以便区分不同阶段的订阅任务。 数据订阅任务的状态和说明,请参见表1。 表1 数据订阅任务状态和说明 状态 说明 创建中 正在创建数据复制服务需要用到的数据订阅实例。 创建失败 创建数据订阅任务失败。 配置 数据订阅实例创建成功,但还没有启动任务,可以继续配置任务。
SDK接口 SDK接口介绍 SDK使用说明 SDK下载地址
修改任务信息 数据订阅任务创建成功后,支持对部分任务基本信息进行修改,以方便区分和识别订阅任务。 支持可修改的任务信息如下: 任务名称 描述 SMN主题 前提条件 已登录数据复制服务控制台。 操作步骤 在“数据订阅管理”页面,选择指定的订阅任务,单击任务名称。 进入“基本信息”页
修改消费时间点 数据复制服务支持在消费的过程中,随时修改消费时间点,修改的时间点必须在订阅任务的时间范围内。一旦修改完消费时间点,那么下游SDK拉取到的增量数据从修改后的消费时间点开始。 本章节将详细介绍通过数据复制服务管理控制台修改消费时间点的操作步骤。 约束限制 数据订阅任务已启动且任务为“正常”状态。
SDK使用说明 数据订阅功能将数据库中关键业务的数据变化信息缓存并提供统一的SDK接口,方便下游业务订阅、获取、并消费。 在使用SDK消费之前,需要先在数据复制服务控制台创建数据订阅任务。 当订阅任务创建完成后,使用SDK可以实时订阅订阅通道中的增量数据。目前: 数据复制服务只提供JAVA版本SDK,SDK下载地址。
setPassword(String password) 设置用户密码。 参数为创建所需数据订阅任务的IAM主账号或子账号密码。 setIp(String ip) 设置订阅通道的IP。 在数据订阅页面,选择指定订阅任务,单击任务名称,在基本信息页签下,获取订阅实例信息的内部IP即可。 ClusterClient接口定义
数据订阅与MySQL到Kafka同步的区别 对比项 MySQL到Kafka同步 数据订阅 支持的源数据库 华为云RDS for MySQL 本地自建MySQL数据库 ECS自建MySQL数据库 其他云MySQL数据库 华为云RDS for MySQL 支持网络 支持公网网络、VPC网络、VPN、专线网络。
SDK下载地址 表1 SDK下载地址 发布时间 SDK下载地址 sha256 说明 2019-01-19 drs-subscribe-sdk-1.0-jar-with-dependencies.jar 7da3dd1504da32fb46ab704943d1c0f5872e1d9