检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据管理服务 DAS 部署架构 本示例中,DRS源数据库为本地自建Oracle数据库,目标端为华为云上的分布式数据库中间件DDM,通过公网网络,将源端的数据同步到目标端,部署架构可参考图1。 图1 公网场景 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。
本地自建MariaDB 10.5版本 ECS自建MariaDB 10.5版本 其他云上MariaDB 10.5版本 全量+增量数据同步 MariaDB 本地自建MariaDB 10.0、10.1、10.2、10.3、10.4、10.5版本 ECS自建MariaDB 10.0、10.1、10
DRS”。进入数据复制服务页面。 在“实时同步管理”页面的任务列表中,选择操作列的“更多”>“转主备”。 在“转主备”页面,选择备任务的可用区。如果为公网网络任务,还需要指定备任务的公网IP完成后,单击“确认”。 提交变更后,单击“返回任务列表”,在实时同步管理页面,可以看到任务状态为“转主备中”。
部署架构 本示例中,DRS源数据库为华为云RDS for MySQL,目标端为华为云同Region下的分布式消息服务Kafka,通过VPC网络,将源数据库的增量数据同步到目标端,部署架构可参考图1。 图1 同VPC场景 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。
进入购买云数据库RDS页面。 选择区域“华东-上海一”。填选实例信息后,单击“立即购买”。 图1 选择引擎版本信息 图2 选择规格信息 图3 选择已规划的网络信息 图4 高级配置 进行规格确认。 如果需要重新选择实例规格,单击“上一步”,回到上个页面修改实例信息。 如果规格确认无误,单击“提交”,完成购买实例的申请。
SASL_PLAINTEXT:使用SASL机制连接Kafka,需要设置SASL相关配置。 SSL:使用SSL加密方式连接Kafka,需要设置SSL相关配置。 SASL_SSL:使用SASL及SSL加密认证方式,需要设置SSL及SASL相关参数配置信息。 枚举值: PLAINTEXT
find password from src DB。 可能原因 RDS的安全策略,不允许用户密码为空,但是源库为客户云下自建MySQL,可以设置空密码。 解决方案 在源库执行以下SQL语句,查询密码为空的用户。 MySQL 5.7及以上版本: SELECT USER,HOST,authentication_string
->GaussDB(DWS)、TaurusDB->MySQL同步支持周期性对比设置。 在“修改对比策略”对话框中,开启周期性对比并设置对比频率、时间等策略,单击“是”完成设置。 开启后,DRS会按照设置的定时策略进行行数对比,对比结果需要在数据级对比中查看。 关闭周期性对比后,下
MongoDB->DDS MongoDB->GeminiDB Mongo 出云 MySQL->MySQL DDS->MongoDB 如果因为非网络原因导致迁移失败,系统默认进行三次自动续传,若三次续传后仍无法恢复,可手动进行续传。 前提条件 已登录数据复制服务控制台。 已成功创建迁移任务。
MongoDB->GeminiDB Mongo 出云 MySQL->MySQL DDS->MongoDB 约束限制 限速模式指的是限制秒级的流量上限,可能因为网络波动原因导致统计值的降低,实际统计的值可能会低于限速值大小。 限速模式只对全量迁移阶段生效,增量迁移阶段不生效。 增量阶段修改限速后,待任务再次进入全量阶段会生效。
EVENT, LOCK TABLES ON [待迁移数据库].* TO 'user1'; 相关文档 DRS要求的MySQL权限有哪些 如何设置最小化权限且独立的使用DRS的Oracle账号 父主题: 数据库用户权限检查
用户ID”,复制用户ID即可,主账号或子账号ID。 setPassword(String password) 设置用户密码。 参数为创建所需数据订阅任务的IAM主账号或子账号密码。 setIp(String ip) 设置订阅通道的IP。 在数据订阅页面,选择指定订阅任务,单击任务名称,在基本信息页签下,获取订阅实例信息的内部IP即可。
在“对象选择”页面,进行对象选择,可参考4。 在“校验规则”页,可选择需要的表进进行规则校验。 如果不需要校验规则,单击“下一步”。 如果需要进行校验规则,可参考5,设置相关规则。 在“预检查”页面,进行任务预校验,校验全部通过后,单击“下一步”。 在“任务确认”页面,确认校验任务信息无误后,单击“提交并启动”。
过用户设置或系统默认的时延阈值时,任务管理界面增量时延显示为红色。 当时延为0s时,说明源数据库和目标数据库的数据是实时同步的。 时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。 一个事务同步的完整过程如下: 源端数据库的抽取; 经过网络的传输;
oracle:云下自建Oracle数据库。 ecs_oracle:华为云ECS自建Oracle数据库。 cloud_gaussdbv5:华为云数据库GaussDB分布式。 mysql:他云/本地自建MySQL数据库。 ecs_mysql:华为云ECS自建MySQL数据库。 cloud_mysql:华为云数据库RDS
cause by: filter data in config condition filter error! 可能原因 DRS同步任务数据过滤条件设置错误,导致增量数据过滤失败。 解决方案 DRS已经同步的表不支持修改过滤规则,请重新创建任务进行同步。 父主题: MySQL->MySQL实时迁移和同步
创建任务时,用户可以在对象选择选择大字段过滤。任务启动后,可通过任务列表“操作”列的“大字段过滤”按钮进行设置。 对于失败状态的任务,设置完之后需要手动续传或重置使设置生效。 操作步骤 在“实时同步管理”页面,选择需要设置的任务,单击操作列的“更多 > 大字段过滤”。 图1 任务列表 在“大字段过滤”对
注以下两种类型数据: 长时间RPO、RTO高的时间段。 规律性RPO、RTO高的时间段。 自治监控:展示DRS的智能自制能力,主要包括: 网络断连时,DRS自动重连并断点续传的次数。 发生数据冲突时,DRS自动使用最新数据覆盖旧数据的次数。 性能监控:展示了DRS实例的实时读取速度和写入速度,有助于诊断性能瓶颈。
cloud_service_type String 用户购买云服务产品的云服务类型,例如EC2,云服务类型为hws.service.type.ec2。 resource_type String 用户购买云服务产品的资源类型,例如EC2中的VM,资源类型为hws.resource.type.vm。 resource_spec_code
不能以这些字符-, _, + 开头 不能包括 . 或 … 长度不能超过 255 个字符 不通过原因 存在不支持索引名。 处理建议 返回迁移设置中,重新选择其他表进行同步,或者修改表映射的索引名称。 父主题: 数据库参数检查