检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MongoDB数据库迁移过程中,源数据库出现内存溢出(OOM)是什么原因 如何关闭集合均衡器Balancer 如何批量导出、导入事件(event)和触发器(trigger) 源库参数lower_case_table_names=1时,为什么不允许迁移包含大写字母的库或者表 分片集群MongoDB迁移前清除孤儿文档
公网模式的DRS任务,源库需要放通DRS的弹性公网IP,目标库需要放通DRS的内网IP。 VPC模式、VPN、专线模式的DRS任务,源库和目标库都需要放通DRS的内网IP。 父主题: PostgreSQL->PostgreSQL实时同步
可能原因 网络不稳定导致访问源库时建立连接超时。 源库系统繁忙导致建立连接超时。 处理方法 检查源库运行状态是否正常。 检查DRS迁移实例和源库之间的网络是否存在丢包、重传等情况。 联系华为工程师调整默认的超时时间。 父主题: MongoDB->DDS实时迁移
图1 方案架构 方案优势 采用全量+增量的迁移方式,保证数据迁移过程中业务不中断,数据不丢失。 通过服务化迁移,免去了传统的DBA人力成本和硬件成本,并允许按需购买,减低迁移成本。 仅需分钟级就能搭建完成迁移任务,让整个环境搭建“高效快速”。 父主题: MySQL分库分表迁移到DDM
登录数据复制服务控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中,选择“数据库>数据复制服务 DRS”,进入数据复制服务信息页面。 在页面左侧导航栏,选择“备份迁移管理”,单击“创建迁移任务”,进入“选定备份”页面。 填写迁移任务信息和备份文件信息,单击“下一步”。 图3
单击左侧的服务列表图标,选择“数据库 > 分布式数据库中间件 DDM”,进入DDM管理控制台。 在弹出的对话框中输入创建DDM账号中的实例用户名和密码,单击“测试连接”检查。 连接成功后单击“登录”,登录DDM实例。 单击创建逻辑库并关联RDS for MySQL实例中创建的逻辑库db_test。
可能原因 网络不稳定导致写入目标库时建立连接超时。 目标库系统繁忙导致建立连接超时。 处理方法 检查目标库运行状态是否正常。 检查DRS迁移实例和目标库之间的网络是否存在丢包、重传等情况。 联系华为工程师调整默认的超时时间。 父主题: MongoDB->DDS实时迁移
x)。在Elasticsearch 7.x中,include_type_name被设置为false,index API格式为PUT /{index}/_doc/{id}和POST {index}/_doc。 处理建议:返回设置同步页面,编辑选定的同步对象的索引名称、Type名称,确保一个index下面只有一个type。
致。 解决方案 管理员(主账号)登录IAM控制台。 在用户列表中,单击用户右侧的“授权”。 图1 IAM用户授权 在授权页面,选择授权方式和需要的权限。此处以DRS FullAccess权限为例,DRS支持的系统权限可参见:DRS系统权限。 继承所选用户组的策略:将IAM用户加入拥有DRS
网络隔离 DRS在创建实例时,可以根据业务需要选择实例所在VPC的子网,DRS在创建完实例后会为用户分配此子网的IP地址,用于连接源数据库和目标数据库。DRS实例与华为云上的源数据库或目标数据库同处一个VPC,通过源数据库、目标数据库或DRS自身的安全组,实现网络访问控制,达到网络隔离的效果。
仅支持增量中、增量失败、暂停状态的任务进行变更。 目前仅支持GaussDB主备版->Kafka的同步任务进行变更。 操作步骤 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 选择“数据库 > 数据复制服务 DRS”。进入数据复制服务页面。 在“实时同步管理”页面的任务列表中,选择操作列的“更多”>“转主备”。
常用场景:云下数据库迁移上云。 特点:云服务无需碰触源数据库,实现数据迁移。 图1 备份迁移 支持的数据库类型 目前,DRS备份迁移支持的源数据库和目标数据库类型,如表1所示。 表1 迁移方案 备份文件版本 目标数据库版本 相关文档 RDS for SQL Server全量备份文件 RDS
用基于哈希的分片键。 集合设置分片并插入文档之后,其中的每个文档的分片的键和值都是不可更改的。如果需要修改文档的分片键,必须要先删除文档,再修改分片键,然后重新插入文档。 分片键不支持数组索引,文本索引和地理空间索引。 基于范围的分片键设置 使用如下命令,开启数据库分片开关。 sh
n表示源数据库的server_id,如果源数据库版本为MySQL5.6,n的取值范围在2-4294967296之间;如果源数据库版本为MySQL5.5和MySQL5.7,n的取值范围在1-4294967296之间。 修改完成后,重新执行预检查。 父主题: 数据库参数检查
可能原因 网络不稳定导致写入目标库时建立连接超时。 目标库系统繁忙导致建立连接超时。 处理方法 检查目标库运行状态是否正常。 检查DRS迁移实例和目标库之间的网络是否存在丢包、重传等情况。 联系华为工程师调整默认的超时时间。 父主题: MongoDB->DDS实时迁移
登录数据复制服务控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中,选择“数据库>数据复制服务 DRS”,进入数据复制服务信息页面。 在页面左侧导航栏,选择“备份迁移管理”,单击“创建迁移任务”,进入“选定备份”页面。 填写迁移任务信息和备份文件信息,单击“下一步”。 图3
规划 备注 VPC VPC名称 vpc-src-172 自定义,易理解可识别。 所属Region 测试Region 现网实际选择时建议选择和自己业务区最近的Region,减少网络时延。 可用区 可用区3 - 子网网段 172.16.0.0/16 子网选择时建议预留足够的网络资源。
当任务状态为灾备中并且当前链路是以MySQL为源的DRS链路,勾选“结束时展示断点信息”后,在任务结束后灾备进度页面会显示源库的GTID和binlog位点信息。 批量结束 在“实时灾备管理”页面的灾备任务列表中,勾选需要结束的任务。 单击左上方的“批量操作”,选择“批量结束”。
资源规划 类别 子类 规划 备注 VPC VPC名称 vpc-DRStest 自定义,易理解可识别。 所属Region 华北-北京四 选择和自己业务区最近的Region,减少网络时延。 可用区 可用区1 - 子网网段 10.0.0.0/24 子网选择时建议预留足够的网络资源。 子网名称
增量状态暂停任务时,仅暂停增量数据的回放、或者拉取加回放,在进行数据库割接前,请先结束任务。 勾选“暂停日志抓取”后,该功能会停止一切DRS和源库、目标库的连接,请注意暂停过长可能会因为源端所需日志过期而导致任务无法恢复续传。建议暂停时间不超过24小时,具体时间请排查相应日志配置。