检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
前提条件 不支持采集二进制类型的字段，例如：BINARY，VARBINARY，IMAGE。 已下载SSMS客户端，下载地址参考SSMS客户端下载。 操作步骤 建议由数据库管理员进行CDC功能的配置操作，以下配置以windows环境为例进行说明。 开启CDC。
配置数据映射规则 概述 本节主要提供数据集成任务Mapping信息的配置说明。Mapping信息用于告诉ROMA Connect源端数据字段到目标端数据字段的映射规则，把获取到的源端数据转换成写入目标端的数据。
接入API数据源 概述 ROMA Connect支持把API作为一个数据源，并用于数据集成任务。在使用API数据源前，您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下，在接入数据源前您需要有可用的集成应用，否则请提前创建集成应用。
接入数据源 概述 在创建数据API之前，您需要先接入数据源，确保可以正常从数据源读取数据。根据数据源类型的不同，数据源的接入配置有所差异。 前提条件 在接入数据源前，请确保ROMA Connect实例与您的数据源所在网络互通。
在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“MQS”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。
解决方案 修改数据源配置，连接与安全配置项选择“专业”模式，在字符串最后加上tinyInt1isBit=false的配置，如：jdbc:mysql://ip:port/database?tinyInt1isBit=false。 父主题： 数据集成任务
在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“Kafka”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。
数据集成指导 业务使用介绍 接入数据源 创建数据集成任务（普通任务） 创建数据集成任务（组合任务） 创建数据集成任务（编排任务） 启停数据集成任务 数据集成任务管理 连接器
后端创建完成后，页面自动跳转到该后端的编辑器页面，后端类型默认为数据后端。 配置和部署数据后端。 在编辑器页面左侧单击“添加数据源”。 在添加数据源弹窗中配置数据源信息，完成后单击“立即添加”。
查看数据集成任务 概述 数据集成任务创建后，您可以查看任务的相关信息，包括任务的配置信息、运行日志、操作日志和调度日志等。 您也可以修改任务的配置，修改任务的操作跟创建任务类似，具体配置说明可参见创建数据集成任务。
接入MRS Kafka数据源 概述 ROMA Connect支持把MRS Kafka作为一个数据源，并用于数据集成任务。在使用MRS Kafka数据源前，您需要先接入数据源。
3.*.* MRS HDFS MRS 3.*.* MRS Hive MRS 3.*.* MRS Kafka MRS 3.*.* MySQL 5.7、8.0 OBS 3 Oracle 11.2g(不推荐)、12.1g(不推荐)、12.2g、19c PostgreSQL 11 RabbitMQ
确保源端和目标端业务系统的数据库为ROMA Connect支持的数据源类型 数据集成支持的数据源请参见数据集成支持的数据源。 ROMA Connect具备向目标端数据库写入数据的权限。 配置数据集成任务 创建集成应用。
创建数据后端 概述 ROMA Connect支持把数据源定义为后端服务，实现从数据源中读写数据，并以API的形式对外开放。 约束与限制 数据源存储的单行数据大小建议不超过2KB，若超过该限制会导致自定义后端响应异常。
数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/汇总数据层/应用数据层/贴源数据层。 连接地址 填写数据库的连接IP地址。 端口 填写数据库的端口。 目录 对应SFTP服务器文件目录地址 用户名 数据库的登录用户名。 密码 数据库的登录密码。
数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/汇总数据层/应用数据层/贴源数据层。 是否使用JDBC字符串 选择连接数据库模式。 否：由系统根据用户配置自动拼接数据源连接字符串。 是：由用户自己输入数据源连接字符串。
从OBS解析文件到RDS数据库，采集过一次后，后面采集会进行更新吗？ OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ MRS Hive目标字段和源端字段数据类型不匹配时，数据是否能集成到目标端？
父主题： 数据源
接入MySQL数据源 概述 ROMA Connect支持把MySQL数据库作为一个数据源，并用于数据集成任务或用于创建数据API。在使用MySQL数据源前，您需要先接入数据源。
数据映射 “数据映射”处理器用于将源端数据转换为目标端格式的数据。后续节点可通过payload方式引用数据映射处理器的输出数据。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
