检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
查询源数据源列表 功能介绍 查询源数据源列表。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/link/instances
开发一个数据源插件，用于实现对数据源的读写。同时，这个数据源插件以标准RESTful接口形式供ROMA Connect接入，最终实现ROMA Connect对数据源的读写。这个数据源插件称为连接器，这类通过连接器接入的数据源称为自定义数据源。 连接器可以直连数据源，是数据源与ROMA
填写数据源的名称，根据规划自定义。建议您按照一定的命名规则填写数据源名称，方便您快速识别和查找。 描述 填写数据源的描述信息。 扩展ABM集群 选择对应的扩展ABM集群实例来采集该数据源的模型数据。 数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/汇总数据层/应用数据层/贴源数据层。 是否使用JDBC字符串
Connect已接入源端和目标端数据源，具体请参考接入数据源。 ROMA Connect具备向目标端数据源写入数据的权限。 若需要配置同步异常的数据存储，需要完成OBS数据源的接入配置，具体请参见接入OBS数据源。 操作步骤 登录ROMA Connect控制台，在“实例”页面单击实例上的“查看控制台”，进入实例控制台。
同步实时数据的场景。实现一个源端多个数据表到一个目标端多个数据表的实时同步及增量同步，提高了数据的集成同步效率。 组合任务支持数据表之间字段（列）级别的灵活映射，例如源端一个数据表中的多个字段可分别映射到目标端的不同数据表中，或者源端多个数据表中的字段可以映射到目标端的一个数据表中。
Kafka数据源连接失败 原因分析 连接地址填写的是MQS内网地址，且MQS同时开启了SSL与VPC内网明文访问时，“是否SSL”选择了“是”。 解决方案 修改“是否SSL”为“否”。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。 父主题： 数据源
数据拆分 “数据拆分”组件将传入该节点的数据按照指定的表达式进行拆分，并将拆分的结果通过节点变量传递给后续节点。通常“数据拆分”组件后续会连接“数据筛选”组件以配合使用。 “数据拆分”为异步处理组件，如果一个任务中存在“数据拆分”节点，最终开放的API将返回传入“数据拆分”节点时的数据。
数据集成普通任务 FDI各类数据库支持哪些数据类型？ 跟踪号是什么，能跟踪到数据吗？ FDI任务是否支持清空目标表？ FDI任务只能采集单张表到单张表吗？ 用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的MRS HIVE如何配置？ 从OBS解析文件到
同个数的元数据。 别名：对元数据的自定义名称。 类型：元数据的数据类型，需要与源端数据中对应字段的数据类型一致。 解析路径：元数据的完整路径，具体请参见元数据解析路径配置说明。 映射规则 配置ROMA Connect源端数据字段到目标端数据字段的映射规则，把获取到的源端数据转换成
这些参数，还需要定义命令的参数。 告警（WaterMeterAlarm） 用于定义水表需要上报的各种告警场景的数据，必要的话需要定义命令。 电池（Battery） 定义水表的电压、电流强度等数据。 传输规则（DeliverySchedule） 定义水表的一些传输规则，必要的话需要定义命令。
影响任务保存。 配置异常数据存储 在配置异常数据存储前，您需要提前完成OBS数据源的接入配置，具体请参见接入OBS数据源。 在创建任务页面中配置异常数据存储信息。 表1 异常数据存储信息 参数 配置说明 集成应用 选择OBS数据源所属的集成应用。 源端数据类型 当前仅支持选择“OBS”。
数据映射 “数据映射”处理器用于将源端数据转换为目标端格式的数据。后续节点可通过payload方式引用数据映射处理器的输出数据。 配置参数 参数 说明 源端数据源 设置源端数据源，数据库类型的数据源在选择完表之后会自动显示字段信息，其他格式的数据源需要通过导入文件或者手动增加的形
数据筛选 “数据筛选”组件对传入该组件的数据按照指定的表达式进行筛选，并将筛选出的结果通过节点变量传递给后续节点。通常“数据筛选”组件会作为“数据拆分”组件的后续步骤以配合使用。 配置参数 参数 说明 表达式 数据筛选的表达式。 使用表达式对数据进行筛选，并传递给后续节点。例如数
是否对转发的设备数据进行base64编码，此处不开启。 包含设备信息 转发的设备数据是否包含设备信息，为方便后续识别转发数据所属的设备，此处开启。 在“数据目的端”下单击“创建数据目的端”，设置数据目的端相关配置，然后单击“保存”，完成数据转发规则的配置。 表4 数据目的端配置 参数
同一个实例中，为什么看到的数据跟其他人看到的不一样？ ROMA Connect对用户资源实现了严格的权限管理。 在同一实例内，用户只能查看和管理自己创建的集成应用和资源，默认不能查看其他用户创建的集成应用和资源。 用户可以通过集成应用授权的方式，把集成应用下的资源共享给同一账号下的其他用户来查看和使用。
Connect支持的数据源类型无法接入您使用的数据源，您可以自行开发一个数据源插件，用于实现对数据源的读写。 同时，这个数据源插件以标准RESTful接口形式供ROMA Connect接入，最终实现ROMA Connect对数据源的读写。 这个数据源插件称为连接器，这类通过连接器接入的数据源称为自定义数据源。
单击“自动Mapping”，源端和目标端数据字段间的映射规则自动建立。 图1 自动Mapping 手动配置Mapping 如果两端的数据表字段不一致，可单击下方的“添加mapping映射”，配置源端数据字段到目标端数据字段的映射关系。 用户可以手动添加源端数据字段与目标端数据字段的映射规则，该方式适用
数据转换 “数据转换”连接器用于数据流的格式转换，当前支持XML转JSON和JSON转XML。 配置参数 参数 说明 转换模式 选择数据转换的模式，可选择“XML转JSON”和“JSON转XML”。 内容 通过脚本编写需要转换的数据。 可通过变量的方式引用前序步骤中的数据，请参考引用变量。
向DWS写入数据时越来越慢怎么解决 原因分析 查看界面上的采集数据，如果写入数据耗时在秒级，属于正常的情况。如果写入几千条数据超过5秒，一般是性能劣化的表现。 解决方案 如果对DWS的某个表频繁访问，会导致写入性能逐渐降低，需要对DWS进行调优，例如，定时使用analyze规划表、VACUUM
型数据库、大数据存储、半结构化存储、消息系统等。如果ROMA Connect支持的数据源类型无法满足您的数据集成场景，您可以自行开发一个数据源读写插件，通过标准的RESTful接口与ROMA Connect进行连接，实现ROMA Connect对这类特殊数据源的读写。这个自定义数据源插件，称为连接器。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
