检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
单击“数据源端”下的“创建数据源端”，增加一条数据源端配置。 配置数据源端相关信息，完成后单击“保存”。 表2 数据源端配置 参数 配置说明 产品名称 选择设备所属的产品。 设备名称 选择要转发数据的设备，可以选择指定设备或全部设备。 Topic名称 选择设备上报消息使用的Topic。
S Hive数据源时，上传的配置文件中全部用的EIP，Hosts里面也配置好IP与Hostname，但是在上传文件时HDFS的Master节点返回的node节点的IP为内网IP，所以连接不通，导致FDI任务执行异常。 解决方案 修改在创建MRS Hive数据源时上传的hdfs-site
即为元数据的完整路径，具体请参见元数据解析路径配置说明。 元数据 指从源端获取到的JSON/XML格式数据中，要集成到目标端的每一个底层key-value型数据元素。 别名：对元数据的自定义名称。 类型：元数据的数据类型，需要与响应消息中对应参数的数据类型一致。 解析路径：元数
选择前端API所属的API分组。若没有可用的API分组，可单击右侧的“创建分组”，创建一个API分组。 说明： 创建API后，将无法修改API所属的API分组，API分组关系到API的访问域名，请谨慎选择。 发布环境 选择前端API要发布的环境。如果没有您需要的环境，可单击右侧的“创建环境”，创建一个环境。
选择集成最早获取的消息数据还是最新获取的消息数据。 元数据 指从源端获取到的JSON或XML格式数据中，要集成到目标端的每一个底层key-value型数据元素。 别名：对元数据的自定义名称。 类型：元数据的数据类型，需要与源端数据中对应字段的数据类型一致。 解析路径：由于数据根字段不设置，此处填写元数据的完整路径。 以JSON格式数据{"a":
在添加数据源弹窗中配置数据源信息，完成后单击“立即添加”。 表2 数据源配置 参数 配置说明 选择数据源 选择创建MQS到数据库的集成任务中接入的MySQL数据源。 选择执行语句类型 选择执行语句的类型，此处选择“SQL”。 高级设置 高级设置保持默认设置。 添加数据源后，在编辑器左侧选择数据源，然
接入数据源 概述 在创建采集任务之前，您需要先接入数据源，确保可以正常从数据源采集模型。根据数据源类型的不同，数据源的接入配置有所差异。 操作步骤 接入DWS数据源 接入GaussDB数据源 接入FI Hive数据源 接入MySQL数据源 接入MongoDB数据源 接入MRS Hive数据源
数据集成 数据集成普通任务 数据集成组合任务
将API与ACL策略进行绑定 功能介绍 将API与ACL策略进行绑定。 同一个API发布到不同的环境可以绑定不同的ACL策略；一个API在发布到特定环境后只能绑定一个同一种类型的ACL策略。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explo
支持的数据与协议 数据集成 数据集成任务支持的数据源相关信息如表1所示。 表1 数据集成支持的数据源 数据源类型 支持的版本 普通任务的源端 普通任务的目标端 组合任务的源端 组合任务的目标端 API - 支持 支持 不支持 不支持 ActiveMQ 5.15.9 支持 支持 不支持
实例到数据源所在子网的路由配置。 接入数据源 接入DWS数据源 接入Gauss100数据源 接入HANA数据源 接入HIVE数据源 接入MongoDB数据源 接入MySQL数据源 接入Oracle数据源 接入PostgreSQL数据源 接入Redis数据源 接入SQL Server数据源
多个数据源编排 一个数据API可以包含多个数据源，因此一次API请求可以涉及多个数据源，例如取第一个数据源查询结果作为第二个数据源的参数。 以MySQL为例说明，假设数据API有数据源1和数据源2，user01是数据源1的数据表和user02是数据源2的数据表，两张表的结构如下：
同步实时数据的场景。实现一个源端多个数据表到一个目标端多个数据表的实时同步及增量同步，提高了数据的集成同步效率。 组合任务支持数据表之间字段（列）级别的灵活映射，例如源端一个数据表中的多个字段可分别映射到目标端的不同数据表中，或者源端多个数据表中的字段可以映射到目标端的一个数据表中。
数据库 MySQL Redis DB2 GaussDB DWS Milvus Oracle PostgreSQL Sql Server 父主题： 连接器
数据筛选 “数据筛选”组件对传入该组件的数据按照指定的表达式进行筛选，并将筛选出的结果通过节点变量传递给后续节点。通常“数据筛选”组件会作为“数据拆分”组件的后续步骤以配合使用。 配置参数 参数 说明 表达式 数据筛选的表达式。 使用表达式对数据进行筛选，并传递给后续节点。例如数
数据拆分 “数据拆分”组件将传入该节点的数据按照指定的表达式进行拆分，并将拆分的结果通过节点变量传递给后续节点。通常“数据拆分”组件后续会连接“数据筛选”组件以配合使用。 “数据拆分”为异步处理组件，如果一个任务中存在“数据拆分”节点，最终开放的API将返回传入“数据拆分”节点时的数据。
填写数据源的名称，根据规划自定义。建议您按照一定的命名规则填写数据源名称，方便您快速识别和查找。 描述 填写数据源的描述信息。 扩展ABM集群 选择对应的扩展ABM集群实例来采集该数据源的模型数据。 数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/汇总数据层/应用数据层/贴源数据层。
是否对转发的设备数据进行base64编码，此处不开启。 包含设备信息 转发的设备数据是否包含设备信息，为方便后续识别转发数据所属的设备，此处开启。 在“数据目的端”下单击“创建数据目的端”，设置数据目的端相关配置，然后单击“保存”，完成数据转发规则的配置。 表4 数据目的端配置 参数
用户可以手动添加源端数据字段与目标端数据字段的映射规则，该方式适用于所有数据类型的集成场景。可以通过键值对输入或文本框输入两种方式配置Mapping映射规则。 键值对输入方式 界面默认为键值对输入方式，单击“添加字段映射”，逐条增加源端数据字段到目标端数据字段的映射规则。 文本框输入方式
FTP数据源测试连接失败 原因分析 服务器端和数据源的连接模式不一致，例如，服务器端连接模式配置为主动连接模式，而数据源配置为被动连接模式。 解决方案 修改连接模式，使服务器端和数据源的连接模式保持一致。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
