检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
批量数据加工 功能介绍 数据复制服务支持对同步的对象进行加工,即可以为选择的对象添加规则。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 接口约束 任务创建成功之后,且完成
MongoDB数据库的写入性能会受索引个数影响,单个索引影响5-8%,索引越多,速度越慢。 实时同步根据同步链路的增量性能上限,定义了六种规格:极小、小、中、大、超大、极大,各个规格的同步性能上限如表2。 表2 规格性能上限 规格名称 增量性能上限(行/秒)参考 极小 300 小 3000
查看或下载日志 操作场景 如果DRS任务已经配置了访问日志,操作详情请参见日志配置管理,就可以在LTS服务分析日志、搜索日志、日志可视化、下载日志和查看实时日志。 查看LTS日志 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中选择“管理与监管
MySQL->TaurusDB实时迁移和同步 全量或增量阶段失败报错,关键词“Illegal mix of collations (utf8mb4_0900_ai_ci,IMPLICIT) and (utf8mb4_general_ci,IMPLICIT) for operation”
对于支持修改参数的DRS任务,您可以查看之前参数的修改历史,以满足业务需要。 操作步骤 在“实时同步管理”界面,选择指定的同步任务。 单击任务名称,页面跳转至“基本信息”页面。 单击左侧“参数管理”,在“参数修改历史”页签可对当前同步任务参数的修改历史进行查询。 默认查询7天内的参数修改历史。 图1 查看修改历史
MySQL->CSS/ES实时同步 增量同步失败报错,关键词“write table *** failed: null” 父主题: 失败案例
每个白名单规则都要遵循格式:TYPE DATABASE USER ADDRESS METHOD; TYPE:取值local或host,local仅用于Unix域套接字连接,外部使用都配置为host。 DATABASE:允许连接的database名称。逻辑复制连接跟普通连接有区别,逻辑复制连接时必须配置为replication。
对于失败状态的任务,设置完之后需要手动续传或重置使设置生效。 操作步骤 在“实时同步管理”页面,选择需要设置的任务,单击操作列的“更多 > 大字段过滤”。 图1 任务列表 在“大字段过滤”对话框中,选择是否使用大字段过滤功能,对同步对象表中的特殊字段(blob、mediumblob、longbl
DRS是否支持同一实例不同库之间的同步 DRS实时同步可通过对象名映射功能,修改目标数据库对象名称,使数据库对象在源数据库和目标数据库中的命名不同,从而实现同一实例不同库之间的同步,详细说明可参考对象名映射。 父主题: 产品咨询
目标库是否存在同步对象 GaussDB->MySQL同步场景 表1 目标库是否存在同步对象 预检查项 目标库是否存在同步对象。 描述 检查目标库是否存在同步对象。 不通过提示及处理建议 不通过原因:部分表无法同步,这些表的特征为:表名称的字母相同但大小写不同。 处理建议:建议修改
目标端Kafka准备 创建Kafka实例 创建Topic 父主题: RDS for MySQL同步到Kafka
Oracle到GaussDB字符集兼容性说明 Oracle到GaussDB同步时,当源库和目标库字符集不兼容时,可能会导致数据乱码或者同步失败的场景,可参考表1进行设置。 表1 字符集兼容性 源库/目标库 UTF8 GBK GB2312 GB18030 US7ASCII √ √ √
一键的值。 ALL:每一行日志中记录了该行所有列的值。 以下三项检查,满足其中一项即可符合DRS增量同步的基本要求。 表级补全日志PK/UI检查(最低要求) 针对用户选择的待同步的表级对象,检查补全日志是否满足要求。 在源库中执行以下sql语句。 select * from ALL_LOG_GROUPS
/11/30 00:00(北京时间)停售通知 停售公告 数据复制服务(DRS)计划于2024/11/30 00:00(北京时间)将MySQL同步到GaussDB(DWS)、GaussDB(for MySQL)同步到GaussDB(DWS)、DDM同步到GaussDB(DWS)正式停售。
源端RDS for MySQL准备 创建RDS for MySQL实例 构造数据 父主题: RDS for MySQL同步到Kafka
/08/31 00:00(北京时间)停售通知 停售公告 数据复制服务(DRS)计划于2025/08/31 00:00(北京时间)将MySQL同步到GaussDB(DWS)、GaussDB(for MySQL)同步到GaussDB(DWS)、DDM同步到GaussDB(DWS),P
变更。 目前仅支持GaussDB集中式版->Kafka的同步任务进行变更。 操作步骤 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 选择“数据库 > 数据复制服务 DRS”。进入数据复制服务页面。 在“实时同步管理”页面的任务列表中,选择操作列的“更多”>“转主备”。
MySQL或MariaDB不同版本之间的语法差异 对于源数据库和目标数据库的版本有差异的迁移和同步链路,由于不同版本之间的部分特性差异,可能会出现语法兼容性问题。 DRS接收到的源数据库Binlog日志中里保存的是原始的执行SQL语句,这些SQL语句将会直接在目标数据库中执行,如
Server数据库能与本地数据库的数据实时同步吗 目前Microsoft SQL Server数据库目前不支持与本地数据库数据的实时同步,如果是上云迁移,可以使用备份迁移。备份迁移支持Microsoft SQL Server的增量迁移,可以有效的缩短业务割接时间。 如果是上云实时同步,目前支持目标库为G
IP具有更强的容错性,更好的负载能力,更快的同步体验。 如果需要使用SCAN IP,需要保证SCAN IP与源库的所有VIP互通,否则无法通过测试连接检查。 若不使用SCAN IP,可以使用某一节点的VIP,其他节点异常不影响同步。 关于SCAN IP的说明,可参考Oracle官网文档。 父主题: 实时同步