检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
IBMMQ：IBM MQ数据源 KAFKA：Kafka数据源 MQS：MQS数据源 RABBITMQ：RabbitMQ数据源 HANA：HANA数据源 MONGODB：MongoDB数据源 REDIS：Redis数据源 API：API数据源 WEBSOCKET：WebSocket数据源 LDAP：LDAP数据源
照一定的命名规则填写数据源名称，方便您快速识别和查找。 描述 填写数据源的描述信息。 扩展ABM集群 选择对应的扩展ABM集群实例来采集该数据源的模型数据。 数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/汇总数据层/应用数据层/贴源数据层。 域名 填写DataArts
MQ是IBM提供的一个消息队列软件，它可以在分布式系统中进行异步通信，确保数据的可靠传输。MQ是一种基于消息的中间件，它提供了一种可靠、安全的方式来传输消息，可以在不同的应用程序、平台和系统之间进行通信。MQ可以确保消息在传输过程中不会丢失、重复或失序，并且可以在不同的系统之间进行数据转换和格式化。 创建IBM
MQ是IBM提供的一个消息队列软件，它可以在分布式系统中进行异步通信，确保数据的可靠传输。MQ是一种基于消息的中间件，它提供了一种可靠、安全的方式来传输消息，可以在不同的应用程序、平台和系统之间进行通信。MQ可以确保消息在传输过程中不会丢失、重复或失序，并且可以在不同的系统之间进行数据转换和格式化。 创建IBM
”。 接入数据源。 配置ROMA Connect接入业务系统的数据库，确保可以正常从数据库读取数据。不同类型数据源的接入配置不同，此处以MySQL数据库为例，其他类型数据库请参考接入数据源。 在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“
CodeArts Repo CodeArts Repo连接器用于对接华为云CodeArts Repo服务。 代码托管（CodeArts Repo）是华为全栈自研的代码托管服务，基于Git提供分布式代码管理和协同开发能力，包括成员管理、权限控制、代码托管、代码检查、代码审核、代码追
MQS消息堆积最佳实践 方案概述 Kafka将Topic划分为多个分区，消息被分布式存储在分区中。同一个消费组内，一个消费者可同时消费多个分区，但一个分区在同一时刻只能被一个消费者消费。 在消息处理过程中，如果客户端的消费速度跟不上服务端的发送速度，未处理的消息会越来越多，这部分
Service，简称OBS）是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力，可供用户存储任意类型和大小的数据。 ROMA Connect可以使用OBS作为数据集成任务的源端和目标端，也可以在数据集成任务运行过程中，把转换异常的数据存储到OBS中。 分布式缓存服务 分布式缓存服务（Distributed
发布数据API 在数据后端创建后，您需要发布数据后端，生成数据API并发布到环境上，才可供其他用户调用。 前提条件 每个API都要归属到某个API分组下，在发布函数API前您需要有可用的API分组，否则请提前创建API分组。 如果需要使用自定义认证方式进行API的安全认证，请提前创建前端自定义认证。
辑器页面，后端类型默认为数据后端。 配置和部署数据后端。 在编辑器页面左侧单击“添加数据源”。 在添加数据源弹窗中配置数据源信息，完成后单击“立即添加”。 表2 数据源配置 参数 配置说明 选择数据源 选择创建MQS到数据库的集成任务中接入的MySQL数据源。 选择执行语句类型
根据数据源类型的不同，数据源的接入配置有所差异，具体如下表所示。接入数据源后，单击数据源名称可以查看数据源详情，数据源详情中可查看数据源相关的任务信息。 ROMA Connect数据集成适用于异构数据源之间的数据类型转换和按需集成。对于业界主流数据库之间的数据迁移、同步场景，建议使用数据复制服务
事件网格感知到的订阅事件。 支持的动作 华为云事件源 自定义事件源 配置参数 表1 华为云事件源 参数 说明 事件订阅名称 在事件网格创建的事件订阅名称。 区域 事件网格服务所在区域。 项目 事件网格服务所在项目。 通道 事件通道，存储接收到的事件消息，并根据事件规则将事件消息路由到事件目标。
接入Oracle数据源 概述 ROMA Connect支持把Oracle数据库作为一个数据源，并用于数据集成任务或用于创建数据API。在使用Oracle数据源前，您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下，在接入数据源前您需要有可用的集成应用，否则请提前创建集成应用。
本实践中需要对源端数据进行数据结构转换后，再写入目标端数据库，此处选择“是”。 数据根字段 指从源端获取到的JSON或XML格式数据中，元数据集上层公共字段的路径。此处不设置。 数据类型 选择从Kafka数据源获取的数据格式类型，需要与Kafka实际存储的数据格式一致。 消费偏移设置
台。 在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“MQS”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。
RabbitMQ RabbitMQ是一个开源的消息队列系统，它实现了高效的消息传递机制，可以在分布式系统中进行消息的异步传递和处理。RabbitMQ基于AMQP（Advanced Message Queuing Protocol）协议，支持多种编程语言，包括Java、Python、Ruby、
台。 在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“API”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。
指从源端获取到的JSON格式数据中，要集成到目标端的每一个底层key-value型数据元素。 别名：对元数据的自定义名称。 类型：元数据的数据类型，需要与源端数据中对应字段的数据类型一致。 解析路径：元数据的完整路径中，不包含数据根字段的路径部分，具体请参见元数据解析路径配置说明。 元数据解析路径配置说明：
接入DWS数据源 接入Gauss100数据源 接入HANA数据源 接入HIVE数据源 接入MongoDB数据源 接入MySQL数据源 接入Oracle数据源 接入PostgreSQL数据源 接入Redis数据源 接入SQL Server数据源 父主题： 创建并开放数据API
存在。 元数据 定义写入到目标端的JSON格式数据中，每一个底层key-value型数据元素。源端有多少个字段需要集成，则目标端需要定义相同个数的元数据。 别名：对元数据的自定义名称。 类型：元数据的数据类型，需要与源端数据中对应字段的数据类型一致。 解析路径：元数据的完整路径，具体请参见元数据解析路径配置说明。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
