检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
me}。 {hostname}为数据库的连接地址。 {port}为数据库的连接端口号。 {dbname}为要接入的数据库名。 用户名 填写连接数据库的用户名。 密码 填写连接数据库的用户密码。 完成数据源参数配置后，单击“开始检测”，进行数据源的连接测试。 若测试结果为“数据源连接成功！”，则继续下一步。
填写Oracle数据库的JDBC格式连接串，例如：jdbc:oracle:thin:@{hostname}:{port}:{dbname}。 用户名 连接数据库的用户名。 密码 连接数据库的用户密码。 描述 填写连接器的描述信息，用于识别不同的连接器。 支持的动作 获取数据库变更 实时获取数据库变更
用户名 连接数据库的用户名。 密码 连接数据库的用户密码。 描述 填写连接器的描述信息，用于识别不同的连接器。 支持的动作 获取数据库变更 实时获取数据库变更 ，需要在数据库中启动CDC配置。 配置参数 表1 获取数据库变更 参数 说明 表名 要获取数据变更的数据表名。 数据库操作 选择数据库变更的操作。
return consumer; } /** * 将RocketMQ读取出来的消息转换成JSON格式的字符串，实际转换需根据RocketMQ的消息内容来实现 * * @param messageExt * @return
从OBS解析文件到RDS数据库，采集过一次后，后面采集会进行更新吗？ 如果是采集同一个文件，每次在OBS上更新文件，目标端数据库有主键情况下，每次会根据主键更新数据。 如果是采集多个文件，目标端数据库有主键且主键相同的情况下，每次都会更新成时间最早的文件里的值，即数据内容没有变化。
其中，log目录用于存储Filebeat收集到的日志数据以及其它元数据信息，即使容器Filebeat被删除并重新启动，会继续读取该目录中的内容（如registry），并在收集数据时更新该目录，这样可确保Filebeat只收集新的日志数据，避免将已经发送过的数据再次发送。 执行以下命令为log目录配置权限。
c中设置。 执行以下命令退出数据库连接。 exit; Oracle为CDB数据库时的配置 建议由数据库管理员进行CDC功能的配置操作。 开启日志归档和XStream。 在命令行工具中执行以下命令以sys用户连接到数据库。 在实际使用过程中，可以有多种方式连接数据库，此处以命令行方式为例进行说明。
本节主要提供数据集成任务映射规则的配置说明。可以通过配置ROMA Connect源端数据字段到目标端数据字段的映射规则，把获取到的源端数据转换成写入目标端的数据。规则映射有映射模式和脚本模式两种模式，其中映射模式包含自动配置和手动配置两种方式。 约束与限制 源端与目标端字段名请勿使用对应数据库的关键字，否则可能导致任务运行异常。
r模式的CDC功能。另外，根据Oracle数据库类型为CDB数据库还是非CDB数据库，CDC的配置有所不同。 约束与限制 CDC任务当前仅支持采集数据库物理表，不支持视图。 若Oracle数据库为主从模式，不支持使用Oracle从库。 不支持采集二进制类型的字段，例如：BINAR
本节主要提供数据集成任务Mapping信息的配置说明。Mapping信息用于告诉ROMA Connect源端数据字段到目标端数据字段的映射规则，把获取到的源端数据转换成写入目标端的数据。 约束与限制 源端与目标端字段名请勿使用对应数据库的关键字，否则可能导致任务运行异常。 若目标端数据类型为MRS
Connect的数据集成，把业务系统A中的数据进行格式转换后，集成到业务系统B的数据库中使用。后续根据制定的同步计划，定时把业务系统A中新增的数据同步到业务系统B中，保证了两个系统间的数据同步。 ROMA Connect的数据集成直接读取业务系统A中数据库的数据，并根据集成任务的配置，筛
使用已订阅的资产 用户可以基于已订阅的资产，快速完成应用和数据集成业务的构建，减少业务的部署时间。 使用已订阅的API资产 登录新版ROMA Connect控制台。 在左侧导航栏选择“资产中心>我的资产”，切换到“我的订阅”页签。 单击需要使用的资产名称，并切换到“API资产”页签。
Connect对数据源的读写请求，通过调用连接器开放标准的RESTful接口完成。 在完成连接器的开发和部署后，您需要在ROMA Connect上创建连接器，定义连接器的对接参数。 操作步骤 登录ROMA Connect控制台，在左侧的导航栏选择“资产管理”。 单击页面右上角的“创建连接器”。
表的映射关系。 单击表映射关系后的“编辑”，可以根据需要修改数据表的映射关系。 单击表映射关系后的“查看映射”，弹出数据表的字段映射配置窗口，可根据需要修改数据表字段的映射关系或者添加mapping映射。 目标端数据字段长度应大于等于源端数据字段的长度，否则会导致同步后的数据丢失。
多品牌、多种类的生产设备要实现实时监控管理，则设备数据与环境数据需要采集和上传，不同品牌和种类的设备，使用的数据格式、数据库标准不一。 难以预防设备故障 工厂流水线上，任何一台机器出现故障，会对整条流水线产生巨大的影响。 难以优化企业的生产策略和决策 因为收集到的数据格式不一，给
MQS基于Kafka社区版本1.1.0、2.7，您可以在ROMA Connect实例控制台的“实例信息”页面，在“MQS基本信息”下查看Kafka版本信息。Python开源客户端的版本使用请参见客户端版本使用建议。 执行以下命令，安装对应版本的Python Kafka客户端： pip install kafka-python==2
登录ROMA Connect控制台，在“实例”页面单击实例上的“查看控制台”，进入实例信息界面。 在安全组栏单击安全组名称，如下图的“default”，页面跳转至安全组控制台。 选择“出方向规则”页签，查看创建数据源配置的IP是否在目的地址中。 如果目的地址为0.0.0.0/0则表
语句。JSON格式的数据分为两种：带有单引号或双引号的是常量数据，不带任何引号的是变量数据。 SELECT语句中的字段是JSON消息Key里面的值，支持SQL内置的函数。您可以参考表5，获取其他SQL函数的使用方法。同时，SELECT语句不仅支持“*”和函数的组合，也支持数组和嵌
MQS基于Kafka社区版本1.1.0、2.7，您可以在ROMA Connect实例控制台的“实例信息”页面，在“MQS基本信息”下查看Kafka版本信息。Go开源客户端的版本使用请参见客户端版本使用建议。 执行以下命令，安装对应版本的Go Kafka客户端。 go get github.com/con
失 原因分析 任务中配置的时间戳字段为updatetime，源端数据库中createtime记录了数据插入的时间，查看未采集到的数据，updatetime要早于createtime，导致任务运行时数据还没有插入updatetime的时间已经不在增量采集的时间段之内，所以部分数据采集不到。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
