检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
常用场景:实时分析,报表系统,数仓环境。 特点:实时同步功能聚焦于表和数据,并满足多种灵活性的需求,例如多对一、一对多,动态增减同步表,不同表名之间同步数据等。 图3 多对一实时同步 数据订阅 数据订阅是指获取数据库中关键业务的数据变化信息,这类信息常常是下游业务所需要的。数据订
主机名端点识别算法,指定通过服务端证书验证服务端主机名的端点识别算法,不填表示禁用主机名验证。对应Kafka字段:ssl.endpoint.identification.algorithm sasl_mechanism 否 String SASL机制,用于客户端连接的SASL机制,认证类
据在迁移前后是否存在差异。为了尽可能减少对业务的影响和业务中断时间,DRS提供了多种对比方式可进行选择。 实时同步 对比同步项 实时灾备 对比灾备项 任务管理 实时迁移 迁移任务生命周期 在整个DRS任务生命周期中,用户可根据实际需要,对任务进行编辑、暂停、重置、续传、修改限速、结束任务等操作。
据在迁移前后是否存在差异。为了尽可能减少对业务的影响和业务中断时间,DRS提供了多种对比方式可进行选择。 实时同步 对比同步项 实时灾备 对比灾备项 任务管理 实时迁移 迁移任务生命周期 在整个DRS任务生命周期中,用户可根据实际需要,对任务进行编辑、暂停、重置、续传、修改限速、结束任务等操作。
对比策略:分为普通对比和多对一对比两种。 普通对比策略:源库中的一张表跟映射到目标库中的那张表做整表的行数比对。 多对一对比策略:源库中的一张表跟映射到目标库中的聚合表中对应的那部分数据做行数比对。 对比类型为行数对比时,支持对比策略选择。 对比方式:分为静态对比和动态对比两种。 静态对比:对源数据库
同步实例创建中,大约需要5-10分钟。 配置源库信息和目标库数据库密码。 配置源库信息。 单击“测试连接”。 当界面显示“测试成功”时表示连接成功。 选择目标库所在VPC和子网,填写Kafka的IP地址和端口。 单击“测试连接”。 当界面显示“测试成功”时表示连接成功。 单击“下一步”。 选择同步信息、策略、消息
数据复制服务对源数据库有什么要求 不同链路,数据库和权限的要求也不同,可参考以下链接,选择对应链路查看使用须知: 支持的数据库版本 实时迁移方案概览 备份迁移方案概览 实时同步方案概览 数据订阅使用须知 实时灾备方案概览 父主题: 产品咨询
数据复制服务对目标数据库有什么要求 在创建任务时,用户填写的连接目标数据库的用户,需具备一定的权限。不同链路的具体权限可参考使用须知中权限要求。 实时迁移请参考实时迁移方案概览 备份迁移请参考备份迁移方案概览 实时同步请参考实时同步方案概览 数据订阅强参考数据订阅使用须知 实时灾备请参考实时灾备方案概览
导入。 修改导入文件时模板时,示例内容需要清除,填写为正确的值。 在填写源和目标库实例时,可以只填必须参数,但需要用户自行保证源和目标库的子网是打通的。 导入模板是结合API和界面信息来设计的,请根据以下参数说明严格填写,并自行保证参数准确性。 导入模板上传成功后即下发申请创建D
配置同步实例信息,选择“数据流动方向”、“源数据库引擎”、“目标数据库引擎”、“网络类型”、“DRS任务类型”、“、“目标数据库实例”、“同步实例所在子网”(非必选)、“同步模式”,选择“规格类型”和“可用区”,选填“标签”。 图1 同步实例信息 单击“开始创建”。 配置源库及目标库信息。
MySQL数据同步对源数据库和目标数据库有什么影响 以下数据以MySQL2MySQL大规格实时同步任务为例,不同规格对数据库的连接数存在差异,仅供参考。 DRS对源数据库的压力及影响 全量(初始化)阶段,DRS需要从源库将所有存量数据查询一次。DRS查询使用简单SQL语句,对源库影响主要
rds-Replaytar 选择目标数据库实例。 目标数据库实例名称为数据库准备中的rds-Replaytar。 录制实例所在子网 默认的子网 录制回放任务所在的子网。 指定公网IP - 选择DRS实例的公网IP,网络准备中创建的公网IP。 选择可用区和企业项目。 图4 选择可用区和企业项目
当源库有无主键表时需要lock table权限,对源库有什么影响? 在全量阶段,源库会锁无主建表大概10s,对有主键表无影响。 在增量阶段,不影响源库。 父主题: 权限管理
DAS 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。 本实践端到端的数据为测试数据,仅供参考。 全量同步可以实现数据迁移;增量同步可以实现实时同步源端和目标端两个库之间的数据。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 如果测试使用,需要自行在本地搭建MySQL数据库。
在数据迁移过程中,对源库中目标库进行操作,会对DRS有什么影响? 对源库操作,drs任务会正常迁移数据。但是如果对源库操作是迁移中不支持的DDL,DML会导致数据对比不一致。 对目标库操作 进行添加字段,drs任务是正常的。 对表进行修改字段,减少字段,会导致drs任务失败。 进
主机名端点识别算法,指定通过服务端证书验证服务端主机名的端点识别算法,不填表示禁用主机名验证。对应Kafka字段:ssl.endpoint.identification.algorithm sasl_mechanism 否 String SASL机制,用于客户端连接的SASL机制,对应Kafka字段:sasl
约束限制 对比是大小写敏感的,如果业务数据库或灾备数据库一端为非大小写敏感,一端为大小写敏感,对比结果可能出现不一致的情况。 如果在对比时业务数据库进行DDL操作,为保证对比结果的准确性,需重新进行内容对比。 如果单独对灾备数据库进行数据修改操作,可能会导致对比结果不一致。 如果
subnet_id 是 String 数据库实例所在子网ID,获取方法如下: 方法1:登录虚拟私有云服务的控制台界面,单击VPC下的子网,进入子网详情页面,查找网络ID。 方法2:通过虚拟私有云服务的API接口查询,具体操作可参考查询子网列表。 security_group_id 否 String
灾备数据库实例 rds-DRtar 选择灾备数据库实例。 灾备数据库实例名称为数据库准备中的rds-DRtar。 灾备实例所在子网 默认的子网 灾备任务所在的子网。 目标库实例读写设置 只读 灾备过程中,将灾备数据库实例设置为“只读”状态。 是否开启Binlog快速清理 否 DRS任
“同步进度”页签,查看同步过程中各同步对象的同步进度,DRS通过流式进度展示,可以帮助您实时了解同步完成的情况。 待子任务变更完成后,开始对编辑后的同步对象进行增量同步。 方法二 在“实时同步管理”页面,选择需要修改同步对象的任务,单击任务名称。 页面跳转至“基本信息”,切换到“