检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
架构说明 最小权限设计 采用JDBC连接,无需在用户的源数据库、目标数据库节点部署程序。 任务独立虚拟机运行独享资源,租户之间数据隔离。 采用最小IP资源,在源数据库、目标数据库仅开放DRS数据迁移实例节点IP访问权限,无需增加网段。 可靠性设计 连接异常自动重试:当网络闪断、数据库
资源名称,固定为“DRS”。 _service_type String 服务类型,固定为“数据复制服务”。 下载LTS日志文件 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中选择“管理与监管 > 云日志服务”,进入“云日志服务”信息页面。 在“日志
资源名称,固定为“DRS”。 _service_type String 服务类型,固定为“数据复制服务”。 下载LTS日志文件 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中选择“管理与监管 > 云日志服务”,进入“云日志服务”信息页面。 在“日志
资源名称,固定为“DRS”。 _service_type String 服务类型,固定为“数据复制服务”。 下载LTS日志文件 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中选择“管理与监管 > 云日志服务”,进入“云日志服务”信息页面。 在“日志
日志配置管理 操作场景 配置访问日志后,DRS实例(包含实时迁移、备份迁移、实时同步、实时灾备和录制回放实例)新生成的所有日志记录会上传到云日志服务(Log Tank Service,简称LTS)进行管理。 注意事项 进行LTS日志配置后,会默认上传该任务的所有日志。 配置完成后不会立即生效,存在10分钟左右的时延。
日志配置管理 操作场景 配置访问日志后,DRS实例(包含实时迁移、备份迁移、实时同步、实时灾备和录制回放实例)新生成的所有日志记录会上传到云日志服务(Log Tank Service,简称LTS)进行管理。 注意事项 进行LTS日志配置后,会默认上传该任务的所有日志。 配置完成后不会立即生效,存在10分钟左右的时延。
资源名称,固定为“DRS”。 _service_type String 服务类型,固定为“数据复制服务”。 下载LTS日志文件 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中选择“管理与监管 > 云日志服务”,进入“云日志服务”信息页面。 在“日志
日志配置管理 操作场景 配置访问日志后,DRS实例(包含实时迁移、备份迁移、实时同步、实时灾备和录制回放实例)新生成的所有日志记录会上传到云日志服务(Log Tank Service,简称LTS)进行管理。 注意事项 进行LTS日志配置后,会默认上传该任务的所有日志。 配置完成后不会立即生效,存在10分钟左右的时延。
资源名称,固定为“DRS”。 _service_type String 服务类型,固定为“数据复制服务”。 下载LTS日志文件 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在“所有服务”或“服务列表”中选择“管理与监管 > 云日志服务”,进入“云日志服务”信息页面。 在“日志
日志配置管理 操作场景 配置访问日志后,DRS实例(包含实时迁移、备份迁移、实时同步、实时灾备和录制回放实例)新生成的所有日志记录会上传到云日志服务(Log Tank Service,简称LTS)进行管理。 注意事项 进行LTS日志配置后,会默认上传该任务的所有日志。 配置完成后不会立即生效,存在10分钟左右的时延。
日志配置管理 操作场景 配置访问日志后,DRS实例(包含实时迁移、备份迁移、实时同步、实时灾备和录制回放实例)新生成的所有日志记录会上传到云日志服务(Log Tank Service,简称LTS)进行管理。 注意事项 进行LTS日志配置后,会默认上传该任务的所有日志。 配置完成后不会立即生效,存在10分钟左右的时延。
增量迁移或同步期间DRS任务报错,日志提示信息:service INCREMENT failed, cause by: Lock wait timeout exceeded; try restarting transaction 可能原因 访问目标库存在锁等待超时。 解决方案 请联系目
上云操作 本章节通过购买GaussDB(for MySQL)实例、创建DRS迁移任务,将自建MySQL服务器的数据迁移到GaussDB(for MySQL)实例。 创建GaussDB(for MySQL)实例 创建DRS迁移任务 确认数据迁移结果 父主题: 实施步骤
MySQL->MySQL MySQL->CSS/ES MySQL->Oracle MySQL->Kafka MySQL->MariaDB DDM->MySQL DDM->Oracle GaussDB(for MySQL)->MySQL GaussDB(for MySQL)->CSS/ES GaussDB(for
全量或增量阶段,DRS迁移或同步任务报错,日志提示信息:service LOGMANAGER failed, cause by: Read timed out 可能原因 针对该情况分析,可能存在如下原因: 访问源库时建立连接失败。 解决方案 检查源库运行状态是否正常。 检查DRS实例和源库之间的网络是否能够连通。
自建到自建 将MySQL同步到Kafka 将MySQL同步到CSS/ES 将MySQL同步到GaussDB主备版 将MySQL同步到GaussDB分布式版 将Oracle同步到Kafka 将Oracle同步到GaussDB主备版 将Oracle同步到GaussDB分布式版 将PostgreSQL同步到Kafka
MySQL到Kafka的参数说明 参数名称 说明 mysqlType 源端表字段名称和类型。 id DRS内部定义的事件操作的序列号,单调递增。 es 源库产生这一条记录的时间,13位Unix时间戳,单位为毫秒。 ts 写入到目标kafka的时间,13位Unix时间戳,单位为毫秒。 database
可直接进行重置。 同步对象中包含无主键表时,全量同步期间重置任务可能存在‘drs_’前缀的临时表残留,需客户手动清理。 前提条件 已登录数据复制服务控制台。 方法一 在“实时同步管理”页面的任务列表中,选择要启动的任务,单击操作列“重置”按钮。 在弹出的“重置任务”窗口,将重新进行同步任务预检查。
为数据库账号密码修改,导致的任务连接失败。 连接源和目标数据库的账号密码修改后,请参考修改连接信息章节修改DRS任务的连接信息,避免任务连接失败后自动重试,导致数据库账号被锁定影响使用。 表3 数据库账号权限 类型名称 增量同步 源数据库连接账号 数据库的CONNECT权限,模式
推荐使用DataArts Migration服务 Kafka 0.11及以上版本 增量数据同步 全量+增量数据同步 CSS/ES ElasticSearch 5.5、6.2、6.5、7.1、7.6、7.9、7.10版本 说明: 目前仅支持白名单用户使用。 全量+增量数据同步 自建Oracle