检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
华为云MapReduce服务（MRS） 华为云MapReduce服务（MRS）是华为云提供的大数据服务，可以在华为云上部署和管理Hadoop系统，一键即可部署Hadoop集群。
数据加工 数据复制服务支持对同步的对象进行加工，即可以为选择的对象添加规则。各链路支持的加工规则不一样，目前仅部分链路支持数据加工，支持数据加工链路参考表1，具体操作方法可参考对应的内容。 表1 支持数据加工的链路 同步方向 数据流向 数据过滤 附加列 列加工 入云 MySQL->MySQL
DRS数据对比 父主题： 图解数据复制服务
平台对接数据格式有哪些要求？ 上传数据格式 转换后数据格式 消息topic格式规范 消息topic格式示例 父主题： 数据服务常见问题
支持的数据库 数据复制服务支持多种数据源之间的数据流通，实时迁移、备份迁移、实时同步、数据订阅和实时灾备对不同数据库的支持情况如下所示。 实时迁移 实时迁移适用于跨云平台、云下数据库迁移上云或云上跨区域等多种业务场景的全部数据库对象迁移，其支持的数据库、版本和迁移类型如下所示，更多实时迁移的功能特性可参考实时迁移。
什么是数据复制服务 数据复制服务（Data Replication Service，简称DRS）是一种易用、稳定、高效、用于数据库实时迁移和数据库实时同步的云服务。 数据复制服务围绕云数据库，降低了数据库之间数据流通的复杂性，有效地帮助您减少数据传输的成本。 您可通过数据复制服务
数据对比 内容对比不支持哪些数据类型 DRS对比任务对数据库有什么影响 DRS对比任务耗时预估 DRS对比任务取消后，数据库有对比任务的查询进程未结束
数据库参数检查 源数据库binlog日志是否开启 源数据库binlog格式检查 源数据库expire_logs_days参数检查 源数据库和目标数据库的字符集是否一致 源数据库参数server_id是否符合增量迁移要求 源数据库和目标数据库表名大小写敏感性检查 源数据库中是否存在非ASCII字符的对象名称
数据复制服务-成长地图 | 华为云 数据复制服务 数据复制服务（Data Replication Service，简称DRS）是一种易用、稳定、高效、用于数据库在线迁移和数据库实时同步的云服务。 图说DRS 立即体验 产品介绍 成长地图 由浅入深，带您玩转DRS 01 了解 数据复制服务（Data
源库最大数据库序号是否小于目标库最大数据库序号 Redis迁移场景 表1 源库最大数据库序号是否小于目标库最大数据库序号 预检查项 源库最大数据库序号是否小于目标库最大数据库序号。 描述 源库最大数据库序号是否小于目标库最大数据库序号。 待确认提示及处理建议 待确认原因：源数据库待
数据复制服务是否采用了压缩技术 压缩技术是提升性能和解决数据膨胀的关键技术，DRS在数据传输和增量数据存储两大环节采用了压缩技术。 数据传输压缩：在网络带宽不理想的环境中，进行数据同步与传输，DRS可以开启压缩开关，以减少数据传输对带宽的占用量。 增量数据存储压缩：增量数据转储成
对比方式：分为静态对比和动态对比两种。 静态对比：对源数据库和目标数据库进行一次全量内容对比，内容对比完成后对比任务结束，适用于无数据变化的非业务时间。 动态对比：先对源数据库和目标数据库进行一次全量内容对比，对比任务完成后进入增量对比阶段，实时比对源数据库和目标数据库的增量数据，适用于有数据变化的业务时间。 目前仅MySQL引擎支持对比方式选择。
MySQL数据同步对源数据库和目标数据库有什么影响 以下数据以MySQL2MySQL大规格实时同步任务为例，不同规格对数据库的连接数存在差异，仅供参考。 DRS对源数据库的压力及影响 全量（初始化）阶段，DRS需要从源库将所有存量数据查询一次。DRS查询使用简单SQL语句，对源库
任务创建成功之后，且完成数据库对象选择后再调用启动任务接口。详情可参考任务创建流程。 每张表仅支持添加一个校验规则。 Oracle为源库的数据过滤每次最多支持20000张表，MySQL为源库的数据过滤每次最多支持10000张表。 过滤条件不支持使用某种数据库引擎特有的packege、函数、变量、常量等写法，须使用通用SQL标准。
数据复制服务对目标数据库有什么要求 在创建任务时，用户填写的连接目标数据库的用户，需具备一定的权限。不同链路的具体权限可参考使用须知中权限要求。 实时迁移请参考实时迁移方案概览 备份迁移请参考备份迁移方案概览 实时同步请参考实时同步方案概览 数据订阅强参考数据订阅使用须知 实时灾备请参考实时灾备方案概览
对比方式：分为静态对比和动态对比两种。 静态对比：对源数据库和目标数据库进行一次全量内容对比，内容对比完成后对比任务结束，适用于无数据变化的非业务时间。 动态对比：先对源数据库和目标数据库进行一次全量内容对比，对比任务完成后进入增量对比阶段，实时比对源数据库和目标数据库的增量数据，适用于有数据变化的业务时间。 对
数据类型映射关系 由于异构数据库之间的数据类型不是一一对应的，所以数据复制服务在进行迁移或同步时，会根据两种不同的数据库类型进行对应的数据类型映射。 本章节根据不同的数据库引擎，提供对应的数据库映射关系列表，方便您在进行数据库迁移或同步的时候参考。 MySQL->PostgreSQL
创建数据订阅任务 支持的数据库 表1 支持数据库信息 数据库引擎 支持订阅的数据类型 RDS for MySQL 5.6、5.7版本 数据更新 结构更新 由于订阅任务当前存在较多订阅对象和操作约束，推荐使用性能、稳定性更高的MySQL到Kafka同步链路进行数据订阅。 数据订阅与
目标数据库是否冲突 MySQL迁移场景 表1 目标数据库是否冲突 预检查项 目标数据库是否冲突。 描述 检查目标数据库是否正在被别的迁移任务使用，当多个迁移任务使用同一个目标数据库，可能会导致迁移失败。 不通过提示及处理建议 不通过原因：RDS实例已经在其他的迁移任务中。 处理建
目标数据库是否存在和源数据库同名的数据库 MySQL迁移场景 表1 目标数据库是否存在和源数据库同名的数据库 预检查项 目标数据库是否存在和源数据库同名的数据库 描述 校验用户提供的目标数据库是否存在与源数据库相同的数据库。 不通过提示及处理建议 不通过原因：源数据库连接失败，导致该项检查无法进行。
RDS全量备份：关系型数据库实例自动或手动生成的全量备份。 操作须知 目标数据库的可用磁盘空间大小至少为待还原数据库总数据量大小的1.5倍。 待还原数据库名称，必须跟备份文件中数据库名称一致（区分大小写）。 不支持源数据库中开启TDE加密的数据库进行备份迁移。 不支持高版本的数据库备份文件在
FULL; 目标数据库磁盘要求 目标数据库的可用磁盘空间至少为待还原数据库总数据量大小的1.5倍。 迁移时间的评估参考 一次完整的备份迁移主要经历以下4个阶段。 图2 迁移示意图 表1 备份迁移说明 阶段 名称 描述 ① 导出数据库备份文件 该阶段主要耗时为生成数据库备份文件所需的
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
