检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
处理建议 修改源数据库或者目标数据库的innodb_strict_mode参数,使其保持一致。 如果为自建的MySQL数据库,可通过命令行方式修改。 通过以下命令查看参数值。 SHOW VARIABLES LIKE "innodb_strict_mode"; 使用命令修改参数。 SET
或index_for_data_filtering。 说明: 是否同步该列到目标库由“filtered”属性控制,与库级、模式级、表级控制方式不同。 primary_key_for_data_filtering String 该列是否在数据过滤高级设置场景下为主键,如果是主建则填该列列名,否则不填。
会导致数据不一致,因此存在数据冲突或任务失败的风险。 增量读取方式 选择增量阶段读取日志方式。 LogMiner:采用Oracle官方接口读取重做日志文件,稳定性好。 Binary Reader: 采用DRS自研方式直接读取和解析原始重做日志文件,性能高,对Oracle资源消耗低。
一致,因此存在数据冲突或任务失败的风险。 增量读取方式 选择增量阶段读取日志方式。 LogMiner:采用Oracle官方接口读取重做日志文件,稳定性好。 Binary Reader:Binary Reader 采用DRS自研方式直接读取和解析原始重做日志文件,性能高,对Oracle资源消耗低。
会导致数据不一致,因此存在数据冲突或任务失败的风险。 增量读取方式 选择增量阶段读取日志方式。 LogMiner:采用Oracle官方接口读取重做日志文件,稳定性好。 Binary Reader: 采用DRS自研方式直接读取和解析原始重做日志文件,性能高,对Oracle资源消耗低。
一致,因此存在数据冲突或任务失败的风险。 增量读取方式 选择增量阶段读取日志方式。 LogMiner:采用Oracle官方接口读取重做日志文件,稳定性好。 Binary Reader:Binary Reader 采用DRS自研方式直接读取和解析原始重做日志文件,性能高,对Oracle资源消耗低。
支持数据加工能力,可对选择的对象添加规则,如数据过滤、列加工等。 不支持数据加工能力。 不支持主备倒换。 不支持主备倒换。 支持主备倒换。 计费方式 仅支持按需计费。 支持按需计费和包年/包月。 支持按需计费和包年/包月。 更多特性 不同链路支持的功能特性也不相同,详情请参见对应链路使用须知。
转包周期”,进入“按需转包年/包月”页面。 选择续费规格,以月为单位,最小包周期时长为一个月。订单确认无误,单击“去支持”,进入“支付”页面。 选择支付方式,单击“确认付款”。 按需转包周期创建成功后,用户可以在任务管理页面对其进行查看和管理。 在任务列表的右上角,单击刷新列表,可查看到按需转
间统一到各个月的某一天(详细介绍请参见统一包年/包月资源的到期日)。确认配置费用后单击“去支付”。 图4 续费确认 进入支付页面,选择支付方式,确认付款,支付订单后即可完成续费。 统一包年/包月资源的到期日 如果您持有多个到期日不同的DRS任务,可以将到期日统一设置到一个日期,便于日常管理和续费。
包年/包月任务在到期后会影响DRS的正常运行。如果您想继续使用DRS任务,需要在规定的时间内进行续费,否则资源将会自动释放,数据也可能会丢失。续费包括手动续费和自动续费两种方式,您可以根据需求选择。了解更多关于续费的信息,请参见续费概述。 费用账单 您可以在“费用中心 > 账单管理”查看与DRS相关的流水和明细账
不考虑其他因素导致的性能瓶颈,通过按表拆分成多个DRS任务,可提升总体迁移性能。 迁移时长预估 由于影响迁移时长的因素很多,因此没有通用的计算方式能准确的计算迁移耗时,用户可先参考实时同步链路规格说明进行评估。建议用户先使用和待迁移实例相同规格、负载、网络配置、数据模型的环境创建测试任务,以评估迁移时长。
本地MySQL数据库迁移至本云云数据库 RDS for MySQL的场景,一般可以使用VPN网络和公网网络两种方式进行迁移,您可以根据实际情况为本地MySQL数据库开放公网访问或建立VPN访问。一般推荐使用公网网络进行迁移,该方式下的数据迁移过程较为方便和经济。 目标数据库的网络设置: 若通过VPN访问,请先
当源库类型属于集群时,该项需要设置为集群。 当源库类型属于副本集或者单节点时,该项需要设置为非集群。 增量数据获取方式 当源端实例类型设置为“集群”,且任务迁移模式为全量+增量时,需要选择增量数据获取方式。除此以外,源数据库必须关闭集合均衡器Balancer并清理孤儿文档,可参考如何关闭集合均衡器B
可选择JSON格式,可参考Kafka消息格式。 同步对象 同步对象选择db_test下的table3_表。 单击“下一步”。 选择数据加工方式。RDS for MySQL到Kafka数据同步目前只支持列加工,列加工提供列级的查询和过滤能力。 单击“下一步”,等待预检查结果。 当所有检查都是“通过”时,单击"下一步”。
或index_for_data_filtering。 说明: 是否同步该列到目标库由“filtered”属性控制,与库级、模式级、表级控制方式不同。 primary_key_for_data_filtering 否 String 该列是否在数据过滤高级设置场景下为主键,如果是主建则填该列列名,否则不填。
您也可以在创建任务后修改流速模式。具体方法请参见修改流速模式。 分片方式 可选“按主键分片”或“按ROWID分片”,根据实际需求进行选择。 “按主键分片”: 有主键表利用主键值分片,分片效率低于按ROWID分片方式。 “按ROWID分片”: 针对无主键大表分片更友好,分片效率更高。
任务启动前须知 源数据库要求: 目前仅支持源数据库为RDS for MySQL。 源数据库已完成SQL流量文件录制,RDS for MySQL录制方式可参考开启SQL审计日志。 目标数据库要求: 目前仅支持目标数据库为RDS for MySQL。 目前仅支持目标数据库版本等于或高于源数据库版本。
任务启动前须知 源数据库要求: 目前仅支持源数据库为RDS for MySQL。 源数据库已完成SQL流量文件录制,RDS for MySQL录制方式可参考开启SQL审计日志。 目标数据库要求: 目前仅支持目标数据库为GaussDB(for MySQL)。 目前仅支持目标数据库版本等于或高于源数据库版本。
单击鼠标右键,选择“属性”,选择“选项 > 恢复模式”,将恢复模式设置为“完整”即可。 图1 设置恢复模式 方法二:使用如下SQL命令的方式进行设置。 USE master; ALTER DATABASE database_name SET RECOVERY FULL; 目标数据库磁盘要求
目标数据库为Kafka,可能存在以下原因,请进行排查: 检查Kafka brokers是否正常状态。 检查Kafka端是否开启了安全认证。如果开启了,请选择对应的安全连接方式,详细配置说明可参考这里。 进行数据迁移前需确保完成网络准备和安全规则设置,如果连接失败,请按照以下方法排查网络配置是否正确。 公网网络 请确保数据库已开放公网访问。