检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Data Capture），即数据变更抓取，通过为源端数据源开启CDC，ROMA Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为MySQL数据库开启Binlog模式CDC功能。 约束与限制 若MySQL数据库为主从模式，不支持使用MySQL从库。
表4 同步数据 参数 说明 表名 选择或者填写数据库中要同步数据的表名。 清空表 每次同步数据，是否先清空表。 表5 增量获取记录 参数 说明 表名 选择或者填写要增量获取记录的数据库中的表名。 字段名 选择要查询数据表的字段名。 WHERE条件 配置要查询数据的条件值（注意值要用英文单引号包住）。
direction_type 是 String 数据源所在任务位置。 SOURCE 数据源处于任务源端 TARGET 数据源处于任务目标端 最小长度：0 最大长度：6 db_name 否 String 数据库名称，只支持MRSHIVE类型的数据源。 最小长度：0 最大长度：64 db_schema
String API的请求协议 HTTP HTTPS app_key 否 String 调试请求使用的APP的key app_secret 否 String 调试请求使用的APP的密钥 domain 否 String API的访问域名，未提供时根据mode的取值使用如下默认值： DEVELOPER
获取API的“请求协议”、“入参定义”和“请求体内容描述”。 获取API的认证信息 根据API使用的安全认证方式不同，还要获取相关的请求认证信息： 认证方式 认证信息 APP认证（签名认证） 向API提供方获取该API所授权集成应用的Key和Secret（或客户端的AppKey
测试数据源SQL是否可用 功能介绍 测试数据源SQL是否可用。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v2/{project_id}/fdi/i
最新动态（html） 本文介绍了Huawei Cloud EulerOS产品新特性和对应的文档动态，新特性将在各个区域（Region）陆续发布，欢迎体验。
个连接器实例，实现ROMA Connect与已部署连接器的对接。ROMA Connect通过已发布的连接器实例接入自定义数据源，实现对数据源的读写。 前提条件 已完成连接器的线下开发和部署，连接器与ROMA Connect的对接接口开发请参考连接器RESTful接口规范。 已在ROMA
健康检查端口 unhealthy Integer 判定后端不健康的阈值，连续探测失败次数 缺省值：3 timeout Integer 探测后端的超时时间，单位秒 缺省值：3 interval Integer 探测后端的间隔时间，单位秒 缺省值：3 表8 NodeIps 参数 参数类型
FTP数据源类型 FTP数据源解析模式下支持的最大文件大小为200M，超过200M的文件将自动跳过，不进行采集；解析的数据行数最大为1500000；不解析模式下，支持的最大文件大小为6M，最大文件数量为20000。 说明： FTP数据源之间多个文件同步统计，代表的是本次同步的文件的数量。
数据集成开发指导 开发说明 连接器RESTful接口规范 自定义数据源开发示例（定时任务） 自定义数据源开发示例（实时任务）
源端Mysql增量采集每小时执行一次时部分数据丢失 原因分析 任务中配置的时间戳字段为updatetime，源端数据库中createtime记录了数据插入的时间，查看未采集到的数据，updatetime要早于createtime，导致任务运行时数据还没有插入updatetime的时间已经不在增量采集的时间段之内，所以部分数据采集不到。
Connect实例在相同VPC内时，可直接跨子网段访问。 与ROMA Connect实例在不同VPC内时，可通过创建VPC对等连接，将两个VPC的网络打通，实现跨VPC访问实例。关于创建和使用VPC对等连接，请参考VPC对等连接。 父主题： 实例管理
选择对应的集成应用。 数据源 根据“执行动作”选择的数据源类型，选择相同类型数据源。 例如执行动作选择的是“发送消息至Kafka”，此处数据源则选择“Kafka”。 Topic 名称 选择用户接收消息的Topic。 自定义消息内容 可以通过${}来引用变量，自定义发送消息的内容。支持的变量如下：
选择或者填写数据库中要更新数据的表名。 更新数据 填写更新操作中目标字段的值（注意值要用英文单引号包住）。 WHERE条件 配置要更新数据的条件值（注意值要用英文单引号包住）。 表5 同步数据 参数 说明 表名 选择或者填写数据库中要同步数据的表名。 清空表 每次同步数据，是否先清空表。
以MQS数据源作为源端，MySQL作为目标端为例创建实时任务。 参考创建数据集成任务（普通任务）接入源端MQS数据源和目标端MySQL数据源，并创建实时任务。完成后运行任务，可以将源端MQS数据源中的数据，迁移到MySQL数据源的表中。 父主题： 数据集成开发指导
自定义后端开发（数据后端） SQL语法 存储过程调用 多个数据源编排 可选参数的使用 父主题： 服务集成开发指导
Data Capture），即数据变更抓取，通过为源端数据源开启CDC，ROMA Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为SQL Server数据库开启CDC功能。 约束与限制 若SQL Server数据库为主从模式，不支持使用SQL
创建数据集成任务（普通任务） 配置任务基本信息 配置源端数据信息 配置目标端数据信息 配置数据映射规则 配置异常数据存储（可选） 配置任务完成后执行（可选） 父主题： 数据集成指导
准备资源 要求 创建指导 VPC和子网 不同的ROMA Connect实例可以复用相同的VPC和子网，也可以使用不同的VPC和子网，请根据实际需要进行配置。在创建VPC和子网时应注意如下要求： 创建的VPC与使用的ROMA Connect服务应在相同的区域。 创建VPC和子网时，如无特殊需求，配置参数使用默认配置即可。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
