检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MySQL的增量数据同步到目标端Kafka,主要包含以下部分内容: 介绍如何在华为云创建RDS for MySQL实例。 介绍如何在华为云创建分布式消息服务Kafka。 介绍如何创建DRS同步任务。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 服务列表 虚拟私有云 VPC 云数据库
RDS for MySQL通过DRS搭建异地单主灾备 方案概述 资源规划 操作流程 生产中心RDS for MySQL实例准备 灾备中心RDS for MySQL实例准备 搭建容灾关系 父主题: 实时灾备
自建到自建 将MySQL同步到Kafka 将MySQL同步到CSS/ES 将MySQL同步到GaussDB主备版 将MySQL同步到GaussDB分布式版 将Oracle同步到Kafka 将Oracle同步到GaussDB主备版 将Oracle同步到GaussDB分布式版 将PostgreSQL同步到Kafka
本示例中目标数据库为在“华北-北京四”创建的灾备实例。 网络类型 公网网络 本示例中采用“公网网络”。 父主题: RDS for MySQL通过DRS搭建异地单主灾备
单击“迁移进度”页签,查看迁移进度以及迁移对象明细。 迁移进度:当所有迁移项显示为100%时,表示全量迁移完成(百分比是根据迁移对象的数量来统计计算的)。 图6 迁移进展 迁移对象明细:当“对象数目”和“已迁移数目”相等时,表示该对象已经迁移完成。 图7 迁移进度明细 增量时延:当全量迁移完成后,任务进入增量阶段,可查看增量时延。
概述 场景描述 本实践使用DRS的实时同步功能将本地Oracle数据库实时同步至华为云DDM。通过全量+增量同步,实现源数据库Oracle和目标数据库DDM的数据长期同步。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 服务列表 虚拟私有云 VPC 分布式数据库中间件DDM
标库中,直到手动任务结束。下面我们通过在源库RDS for MySQL中插入数据,查看Kafka的接收到的数据来验证同步结果。 操作步骤 登录华为云控制台。 单击管理控制台左上角的,选择区域“华南-广州”。 单击左侧的服务列表图标,选择“数据库 > 云数据库 RDS””。 单击RDS实例后的“更多
源数据库存在超过目标库索引列长度限制的索引,则导致迁移失败。 不通过提示及处理建议 不通过原因:源数据库存在超过目标库索引列长度限制的索引。 处理建议:1. 在迁移对象中去除这张表。2. 修改索引长度。 MySQL迁移、同步、灾备场景 表2 源数据库索引长度检查 预检查项 源数据库存在超过目标库索引列长度限制的索引。
集合名.ensureIndex({_id: 1}),如果创建索引不通过提示有重复的索引(_id)值,则不支持该集合的迁移。 父主题: 数据库对象检查
标数据库中不存在,并且也不在所选的对象选择列表中。 处理建议:在角色选择中选择账号依赖的角色一起迁移,或者不迁移这些依赖检查不通过的账号。 不通过原因:源数据库账号依赖的数据库在目标库中不存在,并且也不在用户的对象选择列表中。 处理建议:在对象选择中选择账号依赖的数据库一起迁移,或者不迁移这些依赖检查不通过的账号。
SAM引擎表,可能导致迁移失败。 处理建议:建议把源数据库的表转为InnoDB类型的表再尝试迁移。或者联系技术人员处理。 父主题: 数据库对象检查
for MySQL实例准备 创建VPC和安全组 创建EIP 创建RDS for MySQL实例 父主题: RDS for MySQL通过DRS搭建异地单主灾备
实时同步管理 批量数据加工 批量设置同步策略 高级设置 父主题: API v3(不再推广)
色,否则会导致迁移失败。 不通过提示及处理建议 不通过原因:源数据库角色依赖的数据库在目标数据库中不存在,并且也不在所选的对象选择列表中。 处理建议:在对象选择中选择角色依赖的数据库一起迁移,或者不迁移这些依赖检查不通过的角色。 不通过原因:源数据库角色依赖的角色在目标数据库中不存在,并且也不在用户的角色选择列表中。
(column_name); 若要同步主键表,建议在全量同步期间不执行ALTER TABLE MOVE操作,多分区操作SPLIT/MERGE分区,FLASHBACK操作,ALTER TABLE SHRINK SPACE操作,否则数据重复可能性会增加。 父主题: 数据库对象检查
本实践主要包含以下内容: 介绍如何创建RDS for MySQL实例。 介绍RDS for MySQL实例如何通过DRS服务搭建异地单主灾备。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 实现原理 RDS跨Region容灾实现原理说明: 在两个数据中心独立部署RDS for
单击“同步进度”页签,查看同步进度。 同步进度:当同步项显示为100%时,表示全量同步完成(百分比是根据同步对象的数量来统计计算的)。 图7 同步进展 同步明细:当“对象数目”和“已同步数目”相等时,表示该对象已经同步完成。 图8 同步进度明细 增量时延:当全量同步完成后,任务进入增量阶段,可查看增量时延。 时延
待确认原因:源数据库存在触发器或事件。 处理建议:此警告仅为迁移操作提示,请您先结束任务后再断开源端网络,则可确保迁移完整性。 父主题: 数据库对象检查
不通过原因:需要迁移的表中含有依赖,但是被依赖的表没有被迁移。 处理建议:在对象选择中添加这些表。 不通过原因:迁移列表中含有不允许迁移的视图。 处理建议:检查迁移列表中视图所包含的依赖,并将这些依赖添加到对象选择中。 不通过原因:迁移对象中包含仅大小写不同的重名视图。 处理建议:建议修改视图名或者不迁移这些重名视图。
要,请将这些表的UNLOGGED属性去掉,参考命令:ALTER TABLE TABLE_NAME SET LOGGED。 父主题: 数据库对象检查