检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
端下载。 操作步骤 建议由数据库管理员进行CDC功能的配置操作，以下配置以windows环境为例进行说明。 开启CDC。 使用SSMS客户端连接到SQL Server数据库所在服务器，以sa用户登录数据库。 其中，密码为数据库用户sa的密码，可向数据库管理员获取。 单击“新建查询
发送优化：linger.ms=0 生产端的JVM内存要足够，避免内存不足导致发送阻塞 Topic使用建议 配置要求：推荐3副本。 单Topic最大分区数建议为20。 Topic副本数为3（当前版本限制，不可调整）。 其他建议 连接数限制：3000 消息大小：不能超过10MB 使用SASL_SSL协议访问ROMA
OPENGAUSS：GaussDB数据源 MYSQL：MySQL数据源 ORACLE：Oracle数据源 POSTGRESQL：PostgreSQL数据源 SQLSERVER：SQL Server数据源 TAURUS：GAUSSDB(FOR MYSQL)数据源 DIS：DIS数据源 DWS：DWS数据源
OPENGAUSS：GaussDB数据源 MYSQL：MySQL数据源 ORACLE：Oracle数据源 POSTGRESQL：PostgreSQL数据源 SQLSERVER：SQL Server数据源 TAURUS：GAUSSDB(FOR MYSQL)数据源 DIS：DIS数据源 DWS：DWS数据源
数据集成组合任务 目标表中配置的RowId字段类型不正确导致写入数据失败 读取MySQL的binlog时报“binlog probably contains events generated with statement or mixed based replication forma”错误
在“资源管理”页面单击正在变更规格的实例，进入实例控制台。 在“实例信息”页面中，选择“后台任务”页签，可查看实例规格变更任务信息。 查看后台任务 在实例控制台的“实例信息”页面选择“后台任务”页签，可查看变更实例规格的任务结果，包括创建成功、创建失败两种任务状态。 鼠标悬停于“配置变更”，可查看实例规格变更前配置与变更后配置。
lock.on.buffer.full”来表明。 这项设置将和producer能够使用的总内存相关，但并不是一个硬性的限制，因为不是producer使用的所有内存都是用于缓存。一些额外的内存会用于压缩（如果引入压缩机制），同样还有一些用于维护请求。 max.request.size
源端多个数据表到一个目标端多个数据表的集成同步。当前支持Oracle、MySQL、SQL Server等几种关系型数据库，具体请参见数据库的CDC配置。 启动集成任务。 定时任务启动后，ROMA Connect按照任务计划进行数据集成。首次执行时，会把所有符合条件的源端数据集成到
接入Kafka数据源 接入MySQL数据源 接入MongoDB数据源 接入MQS数据源 接入MRS Hive数据源 接入MRS HDFS数据源 接入MRS HBase数据源 接入MRS Kafka数据源 接入OBS数据源 接入Oracle数据源 接入PostgreSQL数据源 接入Redis数据源
selected_row_count 上一个数据库节点执行查询操作的数据条数。 仅支持MySQL，Gauss200，PostgreSQL，Oracle，SQL Server或DB2数据库。 updated_row_count 上一个数据库节点执行插入、更新和删除操作的数据条数。 仅支持MySQL，Gauss2
Connect接入业务系统的数据库，确保可以正常从数据库读取数据。不同类型数据源的接入配置不同，此处以MySQL数据库为例，其他类型数据库请参考接入数据源。 在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“MySQL”数据源，然后单击“下一步”。
r模式的CDC功能。另外，根据Oracle数据库类型为CDB数据库还是非CDB数据库，CDC的配置有所不同。 约束与限制 CDC任务当前仅支持采集数据库物理表，不支持视图。 若Oracle数据库为主从模式，不支持使用Oracle从库。 不支持采集二进制类型的字段，例如：BINAR
config = new DataSourceConfig() config.setType("mysql") config.setUrl("jdbc:mysql://127.0.0.1:3306/db?allowPublicKeyRetrieval=true")
任务信息。 ROMA Connect数据集成适用于异构数据源之间的数据类型转换和按需集成。对于业界主流数据库之间的数据迁移、同步场景，建议使用数据复制服务DRS；对于关系型数据库、大数据、文本等数据迁移到数据湖的场景，建议使用云数据迁移CDM。 表1 接入数据源 数据源接入配置 普通任务支持的集成模式（源端）
Jira Software 定时器 ArtemisMQ RabbitMQ 事件网格 QQ邮箱 IBM MQ Kafka MySQL Oracle PostgreSQL Sql Server 父主题： 连接器
var config = new DataSourceConfig() config.setType("mysql") config.setUrl("jdbc:mysql://127.0.0.1:3306/db?allowPublicKeyRetrieval=true")
模式的CDC功能。另外，根据Oracle数据库类型为CDB数据库还是非CDB数据库，CDC的配置有所不同。 约束与限制 Oracle数据库需具备OGG License（无需安装OGG）。 若Oracle数据库为主从模式，不支持使用Oracle从库。 不支持采集二进制类型的字段，例
创建数据集成任务（组合任务） 配置Oracle CDC（LogMiner） 配置Oracle CDC（XStream） 配置MySQL CDC（Binlog） 配置SQL Server CDC 创建组合任务 父主题： 数据集成指导
\"sourceDatasourceType\":\"MYSQL\",\"taskType\":2,\"sourceDatasource\":\"mysql\",\"targetDatasourceType\":\"MYSQL\",\"mappingSourceTextOrNot
若数据源分组选择BIGDATA，即可选HIVE/FIHIVE；若数据源分组选择DB，即可选MYSQL/GAUSSDB/GAUSSDB_T/ORACLE/SQLSERVER/POSTGRESQL/DAMENG；若数据源组选择FILE，即可选EXCEL/SWAGGER/FILE_SYSTEM
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
