检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
FTP数据源测试连接失败 原因分析 服务器端和数据源的连接模式不一致,例如,服务器端连接模式配置为主动连接模式,而数据源配置为被动连接模式。 解决方案 修改连接模式,使服务器端和数据源的连接模式保持一致。 如果排除以上问题后,仍然连接失败,可参考数据源连接测试失败排查操作进行问题排查。
最小长度:2 最大长度:64 instance_id String 实例ID。 最小长度:2 最大长度:64 client_id String 设备客户端ID,平台生成的设备唯一标识。 最小长度:0 最大长度:32 node_id String 设备物理编号,通常使用MAC或者IMEI号,支
普通产品:指直连设备或网关子设备类型的产品。 网关产品:指网关设备类型的产品,网关设备可以关联和管理子设备。 协议类型 选择产品所使用的协议类型。 MQTT:是一种基于客户端-服务器的消息发布/订阅传输协议。 ModBus:是一种串行通信协议。 OPC UA:是一种基于以太网的通信协议。 产品名称 填写产品的名
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
Mysql到Mysql的定时任务,源端有类型为tinyint(1),值为2的字段,但是采集到目标端值就变成了1 原因分析 Mysql驱动自动识别tinyint(1)为bit类型,所以目标端的值都变成了1。 解决方案 修改数据源配置,连接与安全配置项选择“专业”模式,在字符串最后加
MySQL到MRS Hive时目标端报“could only be written to 0 of the 1 minReplication nodes. There are 2 datanode(s) running and 2 node(s) are excluded in this
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
APP认证:表示由ROMA Connect对API请求进行安全认证。用户调用API时,使用集成应用的Key和Secret进行API请求的安全认证。 华为IAM认证:表示由IAM对API请求进行安全认证。用户调用API时,使用Token或AK/SK进行API请求的安全认证。 自定义认证:表示
FDI任务只能采集单张表到单张表吗? 普通任务只能从源端的单个表采集到目标端单个表,组合任务可以配置多个表采集到多个表。 父主题: 数据集成普通任务
处保持默认设置即可。 安全认证 选择API使用的安全认证方式。为简单起见,此处选择使用“无认证”。 须知: Site实例中创建API不支持华为IAM认证。 支持跨域CORS 选择API是否支持跨域访问。本配置样例中不涉及跨域访问,此处不开启。 配置API的请求参数。为简单起见,此处不定义请求参数,直接单击“下一步”。
APP认证:表示由ROMA Connect对API请求进行安全认证。用户调用API时,使用集成应用的Key和Secret进行API请求的安全认证。 华为IAM认证:表示由IAM对API请求进行安全认证。用户调用API时,使用Token或AK/SK进行API请求的安全认证。 自定义认证:表示
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
最小长度:2 最大长度:64 instance_id String 实例ID。 最小长度:2 最大长度:64 client_id String 设备客户端ID,平台生成的设备唯一标识。 最小长度:0 最大长度:32 node_id String 设备物理编号,通常使用MAC或者IMEI号,支
创建组合任务 概述 FDI支持创建组合任务,组合任务适用于需要持续同步实时数据的场景。实现一个源端多个数据表到一个目标端多个数据表的实时同步及增量同步,提高了数据的集成同步效率。 组合任务支持数据表之间字段(列)级别的灵活映射,例如源端一个数据表中的多个字段可分别映射到目标端的不
配置异常数据存储(可选) 概述 本节主要提供数据集成任务异常数据存储的配置说明,仅当目标端数据类型为DB2、DWS、MySQL、GaussDB(for MySQL)、Oracle、PostgreSQL和SQL Server、Gauss100时可配置。 在每次任务执行过程中,如果源
FDI任务失败,修改问题后任务写入仍然报错 原因分析 Writer端写入数据时,先从Kafka通道的topic中消费数据,成功入库后才将消费偏移量提交给Kafka。如果写入数据时发生异常,将不会提交消费偏移量,等待修复问题后,重启任务,可以重新消费并处理未成功入库的数据。所以即使
数据映射 “数据映射”处理器用于将源端数据转换为目标端格式的数据。后续节点可通过payload方式引用数据映射处理器的输出数据。 配置参数 参数 说明 源端数据源 设置源端数据源,数据库类型的数据源在选择完表之后会自动显示字段信息,其他格式的数据源需要通过导入文件或者手动增加的形
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
接入数据源 概述 在创建数据集成任务前,ROMA Connect需要先接入源端和目标端数据源,确保可以正常从源端读取数据以及向目标端写入数据。 前提条件 在接入数据源前,请确保ROMA Connect实例与您的数据源所在网络互通。 若ROMA Connect实例与数据源在相同VPC内时,可直接访问数据源。
FDI任务是否支持清空目标表? FDI创建任务时目标端选择DWS、MySQL、Oracle、PostgreSQL/openGauss、SQL Server、GaussDB(for MySQL)数据源支持清空目标表,其他数据源不支持清空表操作。 父主题: 数据集成普通任务