检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在“源库及目标库”页面,同步实例创建成功后,填写源库信息和目标库信息,单击“源库和目标库”处的“测试连接”,分别测试并确定与源库和目标库连通后,勾选协议,单击“下一步”。 测试连接时需要确保DRS任务同源库、目标库的连通性。 网络连通性:确保源库和目标库允许DRS访问,通常至少需要放通DRS
目标数据库IP地址、端口、用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上,待该任务删除后会永久清除。 在“设置同步”页面,选择数据冲突策略和同步对象,单击“下一步”。 图7 同步模式 表9 同步模式和对象 参数 描述 流速模式 流速模式支持限速和不限速,默认为不限速。限速模式只对全量阶段生效,增量阶段不生效。
前手动在主库检查补全日志是否符合要求,以保证任务的正常运行。以下检查和设置方法中, 表级:针对指定表的设置。 库级:指整个数据库级别的设置。 PK/UI:每一行日志中除了记录变更的列以外,还额外记录了该行中主键和唯一键的值。 ALL:每一行日志中记录了该行所有列的值。 以下三项检
同步。可以参考以下使用限制和操作步骤,通过手动在目标库执行DDL的方式,避免源库Online DDL操作导致的源库和目标库表结构不一致,引起的DRS任务失败。 使用限制 本方案为不能使用DRS库级或实例级迁移、同步的场景下的替代方案,建议优先选择库级和实例级,尽量避免使用本方案。
gxc_redsitb、redis_progress)。 库名、schema名和表名不可以包含/<.>\\'`|\?和!。列名不可以包含"'和.。 数据库用户权限要求 在使用DRS进行同步时,连接源库和目标库的数据库用户需要满足以下权限要求,才能启动实时同步任务。不同类型的同步任
sDB分布式版为源任务序列值同步中内容,手动同步序列值。 库名、schema名和表名不可以包含/<.>\\'`|\?和!。列名不可以包含"'和.。 数据库用户权限要求 在使用DRS进行同步时,连接源库和目标库的数据库用户需要满足以下权限要求,才能启动实时同步任务。不同类型的同步任
可用区 表5 任务可用区 参数 描述 可用区 DRS任务创建的可用区,选择跟源或目标库相同的可用区性能更优。 企业项目和标签 图4 企业项目和标签 表6 企业项目和标签 参数 描述 企业项目 企业项目是一种云资源管理方式,企业项目管理服务提供统一的云资源按项目管理,以及项目内的资源
可用区 表5 任务可用区 参数 描述 可用区 DRS任务创建的可用区,选择跟源或目标库相同的可用区性能更优。 企业项目和标签 图4 企业项目和标签 表6 企业项目和标签 参数 描述 企业项目 企业项目是一种云资源管理方式,企业项目管理服务提供统一的云资源按项目管理,以及项目内的资源
同步对象约束 副本集:目前只支持集合(包括验证器,是否是固定集合),索引和视图的同步。 集群:目前只支持集合(包括验证器,是否是固定集合),分片键,索引和视图的同步。 单节点:目前只支持集合(包括验证器,是否是固定集合),索引和视图的同步。 不支持_id字段没有索引的集合。 不支持BinData()的第一个参数为2。
sDB分布式版为源任务序列值同步中内容,手动同步序列值。 库名、schema名和表名不可以包含/<.>\\'`|\?和!。列名不可以包含"'和.。 数据库用户权限要求 在使用DRS进行同步时,连接源库和目标库的数据库用户需要满足以下权限要求,才能启动实时同步任务。不同类型的同步任
INTEXT和SASL_SSL,详细说明可参考Kafka认证方式。 源和目标数据库用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上,待该任务删除后会永久清除。 在“设置同步”页面,选择同步策略和同步对象,单击“下一步”。 图8 同步对象 表11 同步模式和对象 参数 描述
数据复制服务是否采用了并发技术 并发技术是提升性能的关键技术,DRS在多个环节采用了并发技术,总体可以分为两个大类并发技术:读写类并发和线程类并发。 读写类并发 为了提升全量阶段历史数据的搬迁,同时对抗网络的不稳定性,DRS实现了数据行级并发抽取效果,从而使得历史数据搬迁速度最大
风险。 目标数据库用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上,待该任务删除后会永久清除。 在“设置同步”页面,选择数据冲突策略和同步对象,单击“下一步”。 图8 同步模式 表11 同步模式和对象 参数 描述 流速模式 流速模式支持限速和不限速,默认为不限速。限速模式只对全量阶段生效,增量阶段不生效。
DRS任务创建的可用区,选择跟源或目标库相同的可用区性能更优。 DRS任务类型选择“双AZ”时,可用区分为“主可用区”和“备可用区”。 图4 可用区 企业项目和标签 图5 企业项目和标签 表8 企业项目和标签 参数 描述 企业项目 企业项目是一种云资源管理方式,企业项目管理服务提供统一的云资源按项目管
、SSL、SASL_PLAINTEXT和SASL_SSL,详细说明可参考Kafka认证方式。 目标数据库的用户名和密码将在同步过程中被加密暂存到数据库和同步实例主机上,待该任务删除后会永久清除。 在“设置同步”页面,选择同步策略、数据格式和同步对象,单击“下一步”。 图7 同步模式
支持以下网络场景: 源数据库和目标数据库属于同一个VPC网络内 源数据库和目标数据库属于不同VPC网络内 资源规划 表1 资源规划 类别 子类 规划 备注 VPC VPC名称 vpc-dds 自定义,易理解可识别。 所属Region 华南-广州 选择和自己业务区最近的Region,减少网络时延。
约束:最大长度36,只能包含字母、数字、下划线、中划线和中文。 最小长度:1 最大长度:36 value 否 String 标签值。 约束:最大长度43,只能包含字母、数字、下划线、中划线和中文。 最小长度:1 最大长度:43 表7 source_endpoint和target_endpoint字段数据结构说明
约束:最大长度36,只能包含字母、数字、下划线、中划线和中文。 最小长度:1 最大长度:36 value 否 String 标签值。 约束:最大长度43,只能包含字母、数字、下划线、中划线和中文。 最小长度:1 最大长度:43 表8 source_endpoint和target_endpoint字段数据结构说明
约束:最大长度36,只能包含字母、数字、下划线、中划线和中文。 最小长度:1 最大长度:36 value 否 String 标签值。 约束:最大长度43,只能包含字母、数字、下划线、中划线和中文。 最小长度:1 最大长度:43 表8 source_endpoint和target_endpoint字段数据结构说明
relation '%s' does not exist Position: 15 可能原因 表级同步时,未同步相互关联的对象。例如:源库存在A表和B表,且A表依赖B表,同步时只选择同步了A表。 解决方案 清空目标库数据。 重新创建DRS同步任务,选择待同步对象及其关联对象。 启动同步任务。