检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
概述 场景描述 本实践通过创建DRS同步任务,实现将源数据库RDS for MySQL的增量数据同步到目标端Kafka,主要包含以下部分内容: 介绍如何在华为云创建RDS for MySQL实例。 介绍如何在华为云创建分布式消息服务Kafka。 介绍如何创建DRS同步任务。 前提条件
Oracle->GaussDB 表1 数据类型映射关系 源库数据类型 目标库数据类型 源库数据类型做主键,同步能力 源库数据类型做非主键,同步能力 源库数据类型做主键,对比能力 源库数据类型做非主键,对比能力 备注 CHAR CHARACTER 支持 支持 支持,忽略字符前后的空格 支持,忽略字符前后的空格
RDS为空库,等待接收数据。 创建灾备任务时,选择主1、主2应遵循以下原则 灾备双方均为本云RDS实例。 有一方为空实例,空实例作为主2,非空实例作为主1。 双方均为空实例,主1、主2角色无差别,推荐选主2。 灾备双方一方为本云RDS实例,另一方为其他云数据库、ECS自建库或本地自建数据库。
DRS同步阶段1:全量同步 选择创建DRS任务章节创建的DRS全量+增量任务,配置源库及目标库信息。 填写源库的IP、端口、用户、密码等信息。 填写完成后,需要单击“测试连接”,测试连接信息是否正确。 填写目标库的账户和密码。 填写完成后,需要单击“测试连接”,测试连接信息是否正确。
0~2,147,483,647 指定当密码策略为MEDIUM(中)或更高时,为通过validate_password校验,密码至少需包含多少个非字母数字字符。 密码复杂度修改完成后,保存修改结果。 图2 保存修改结果 返回数据复制服务的“迁移模式”页面,继续执行下一步操作即可。 父主题:
without NON-ASCII characters to test connection. 测试连接的参数包含非ascii字符。 请检查测试连接参数,使用不带非ASCII字符的用户信息测试连接。 200 DRS.KE0045 The user account is locked
查看监控指标 操作场景 云服务平台提供的云监控,可以对数据复制服务的实时迁移、实时同步和实时灾备实例(下文简称实例)的运行状态进行日常监控。您可以通过管理控制台,直观地查看实例的各项监控指标。由于监控数据的获取与传输会花费一定时间,因此,云监控显示的是当前时间5~10分钟前的实例
查看监控指标 操作场景 云服务平台提供的云监控,可以对数据复制服务的实时迁移、实时同步和实时灾备实例(下文简称实例)的运行状态进行日常监控。您可以通过管理控制台,直观地查看实例的各项监控指标。由于监控数据的获取与传输会花费一定时间,因此,云监控显示的是当前时间5~10分钟前的实例
查看监控指标 操作场景 云服务平台提供的云监控,可以对数据复制服务的实时迁移、实时同步和实时灾备实例(下文简称实例)的运行状态进行日常监控。您可以通过管理控制台,直观地查看实例的各项监控指标。由于监控数据的获取与传输会花费一定时间,因此,云监控显示的是当前时间5~10分钟前的实例
的数据库。 Oracle数据库迁移场景 表3 源数据库库名是否合法 预检查项 源数据库库名是否合法。 描述 源数据库的库名不支持的字符有:非ASCII字符、“. ”、 “>”、 “<”、 “\”、 “`”、 “|”、 “,”、 “? ”、 “! ”、 “"”和 “'”。 该项校验
TABLE)和创建索引(CREATE INDEX)语句有错误时,不会触发警告信息,而是直接抛出错误。innodb_strict_mode=OFF,表示执行时使用非严格模式,即宽松的语法检查,遇到错误的语法时会使用默认的语法去替换。例如,MySQL 5.7.34版本,如果设置了innodb_strict
创建连接 功能介绍 创建单个连接,该连接可以为线下自建库或云上RDS等,目前支持的数据库引擎包括MySQL、PostgreSQL、Oracle和MongoDB。 URI POST /v5/{project_id}/connections 表1 路径参数 参数 是否必选 参数类型 描述
"order_id" ON "public"."mall_order_dc" USING BTREE ("id"); - 自定义的字段名和系统隐藏字段重名 加_new后缀 Create Table mall_order_dc ( xc_node_id bigint NOT NULL
标数据库对于源数据库中执行SQL中有不支持的语法约束,那么DRS任务将会报错并失败。 例如以下几种源数据库和目标数据库的语法不兼容的场景(非全部场景): 源数据库MySQL 5.7.34版本中执行create table t1 (id int, c1 varchar(16), FULLTEXT
检查该用户是否有Schema对象需要评估。至少需要一个对象需要评估。 必须 DBA权限 检查用户是否有DBA(数据库管理员)的权限,才能进行后续操作。 非必须 若为“警告”,评估项目仍能创建成功,但可能由于权限不足导致部分对象无法采集。 目标数据库连接用户需要具有创建/删除/更改schema、
INDEX、COMMENT ON VIEW。 表级同步:RENAME表名之后,向更改名称后的表插入新的数据时,DRS不会同步新的数据到目标库。 库级同步:源库使用非CREATE TABLE方式创建的表不会同步到目标库。常见地如:使用CREATE TABLE AS创建表、调用函数创建表。 暂不支持以注释开