检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
服务。 宽松模式 开启后,当第三方认证服务不可用(与鉴权服务建立连接失败或者鉴权服务返回5xx响应)时,ROMA Connect仍然接受客户端请求。 允许携带原始请求体 开启后,将携带API原始请求体调用第三方认证服务。 请求体大小(字节) 仅当“允许携带原始请求体”开启时可配置。
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
MRS Hive目标字段和源端字段数据类型不匹配时,数据是否能集成到目标端? 目标端MRS Hive和源端字段数据类型不匹配时,例如源端字段为datetime,目标端字段为date,数据可以集成到目标端,但是数据类型不匹配的字段值会为NULL,其他字段正常集成。 父主题: 数据集成普通任务
配置数据映射规则 概述 本节主要提供数据集成任务Mapping信息的配置说明。Mapping信息用于告诉ROMA Connect源端数据字段到目标端数据字段的映射规则,把获取到的源端数据转换成写入目标端的数据。 配置Mapping信息 在创建任务页面中配置Mapping信息,有自动配置和手动配置两种方式。
MySQL到MRS Hive时目标端报“could only be written to 0 of the 1 minReplication nodes. There are 2 datanode(s) running and 2 node(s) are excluded in this
FTP数据源测试连接失败 原因分析 服务器端和数据源的连接模式不一致,例如,服务器端连接模式配置为主动连接模式,而数据源配置为被动连接模式。 解决方案 修改连接模式,使服务器端和数据源的连接模式保持一致。 如果排除以上问题后,仍然连接失败,可参考数据源连接测试失败排查操作进行问题排查。
最小长度:2 最大长度:64 instance_id String 实例ID。 最小长度:2 最大长度:64 client_id String 设备客户端ID,平台生成的设备唯一标识。 最小长度:0 最大长度:32 node_id String 设备物理编号,通常使用MAC或者IMEI号,支
普通产品:指直连设备或网关子设备类型的产品。 网关产品:指网关设备类型的产品,网关设备可以关联和管理子设备。 协议类型 选择产品所使用的协议类型。 MQTT:是一种基于客户端-服务器的消息发布/订阅传输协议。 ModBus:是一种串行通信协议。 OPC UA:是一种基于以太网的通信协议。 产品名称 填写产品的名
Mysql到Mysql的定时任务,源端有类型为tinyint(1),值为2的字段,但是采集到目标端值就变成了1 原因分析 Mysql驱动自动识别tinyint(1)为bit类型,所以目标端的值都变成了1。 解决方案 修改数据源配置,连接与安全配置项选择“专业”模式,在字符串最后加
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
最小长度:2 最大长度:64 instance_id String 实例ID。 最小长度:2 最大长度:64 client_id String 设备客户端ID,平台生成的设备唯一标识。 最小长度:0 最大长度:32 node_id String 设备物理编号,通常使用MAC或者IMEI号,支
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
$context.providerAppId:API拥有者的应用对象ID,暂不支持使用 $context.clientCertCN:开启客户端认证时,本次API调用携带的客户端证书CN 前端认证参数取值:以“$context.authorizer.frontend.”为前缀,如希望自定义认证校验
FDI任务只能采集单张表到单张表吗? 普通任务只能从源端的单个表采集到目标端单个表,组合任务可以配置多个表采集到多个表。 父主题: 数据集成普通任务
创建组合任务 概述 FDI支持创建组合任务,组合任务适用于需要持续同步实时数据的场景。实现一个源端多个数据表到一个目标端多个数据表的实时同步及增量同步,提高了数据的集成同步效率。 组合任务支持数据表之间字段(列)级别的灵活映射,例如源端一个数据表中的多个字段可分别映射到目标端的不
配置异常数据存储(可选) 概述 本节主要提供数据集成任务异常数据存储的配置说明,仅当目标端数据类型为DB2、DWS、MySQL、GaussDB(for MySQL)、Oracle、PostgreSQL和SQL Server、Gauss100时可配置。 在每次任务执行过程中,如果源
接入数据源 概述 在创建数据集成任务前,ROMA Connect需要先接入源端和目标端数据源,确保可以正常从源端读取数据以及向目标端写入数据。 前提条件 在接入数据源前,请确保ROMA Connect实例与您的数据源所在网络互通。 若ROMA Connect实例与数据源在相同VPC内时,可直接访问数据源。
数据映射 “数据映射”处理器用于将源端数据转换为目标端格式的数据。后续节点可通过payload方式引用数据映射处理器的输出数据。 配置参数 参数 说明 源端数据源 设置源端数据源,数据库类型的数据源在选择完表之后会自动显示字段信息,其他格式的数据源需要通过导入文件或者手动增加的形
FDI任务失败,修改问题后任务写入仍然报错 原因分析 Writer端写入数据时,先从Kafka通道的topic中消费数据,成功入库后才将消费偏移量提交给Kafka。如果写入数据时发生异常,将不会提交消费偏移量,等待修复问题后,重启任务,可以重新消费并处理未成功入库的数据。所以即使