检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
接入OBS数据源 概述 ROMA Connect支持把OBS（对象存储服务）作为一个数据源，并用于数据集成任务。在使用OBS数据源前，您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下，在接入数据源前您需要有可用的集成应用，否则请提前创建集成应用。 操作步骤
OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ 任务配置时源端OBS的元数据填写顺序必须与CSV文件中列的顺序一致，需修改任务配置，按照文件中列的顺序填写元数据。 父主题： 数据集成普通任务
OBS数据源测试连接失败 原因分析 可能是以下两种原因导致： 数据源地址未配置为Endpoint地址。 AK/SK和桶名称不正确。 解决方案 修改地址为Endpoint地址。 填写正确的AK/SK和桶名称。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。
对象存储服务 对象存储服务连接器用于对接华为云对象存储服务。 对象存储服务（Object Storage Service，简称OBS）是一个基于对象的海量存储服务，为您提供海量、安全、高可靠、低成本的数据存储能力。 创建对象存储服务连接 登录新版ROMA Connect控制台。
待提取图片暗水印的图片地址，当前只支持OBS对象，格式为 obs://bucket/object ，其中bucket为和当前项目处于同一区域的OBS桶名称，object为对象全路径名。例如：obs://hwbucket/hwinfo/hw.png，其中obs://表示OBS存储，hwbucket为桶名，hwinfo/hw
公网HTTP/HTTPS URL。 华为云OBS提供的URL，使用OBS数据需要进行授权。包括对服务授权、临时授权、匿名公开授权。详情参见配置OBS服务的访问权限。 置信度 置信度的阈值（0~1），低于此置信数的标签，将不会返回。 父主题： 华为云服务
从OBS解析文件到RDS数据库，采集过一次后，后面采集会进行更新吗？ 如果是采集同一个文件，每次在OBS上更新文件，目标端数据库有主键情况下，每次会根据主键更新数据。 如果是采集多个文件，目标端数据库有主键且主键相同的情况下，每次都会更新成时间最早的文件里的值，即数据内容没有变化
Site实例中不支持API分析。 操作步骤 登录ROMA Connect控制台，在“实例”页面单击实例上的“查看控制台”，进入实例控制台。 在左侧的导航栏选择“服务集成 APIC > API分析”，在“调用分析”页签中可查看API的调用统计情况。 可查看“API总数”、“API分组总数”、“流控策略总数”的实时统计。
用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的MRS HIVE如何配置？ 从OBS解析文件到RDS数据库，采集过一次后，后面采集会进行更新吗？ OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ MRS Hive目标字段和源端字段数据类型不匹配时，数据是否能集成到目标端？
按生产时间查询：按生产消息的时间查询。 按偏移量查询：按分区中记录消息的位置查询。 实例节点出现故障的情况下，若Topic中的数据量比较大，单副本Topic查询消息时会出现内部服务错误问题，建议根据数据量适当减小查询时间范围。 表1 消息内容说明 参数 说明 Topic名称 消息所在的Topic名称。 消息ID 每条
","enable":true,"config": "{"max_timeout": 500}"} max_timeout APIC到后端服务的超时时间上限。 60000 ms 1-600000 ms app_token 是否开启app_token认证方式。 是 {"name":"app_token"
请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String 用户Token。通过调用IAM服务获取用户Token接口获取（响应消息头中X-Subject-Token的值）。 表3 请求Body参数 参数 是否必选 参数类型 描述 body
集成能力 RCU分配指标 规格指标/RCU 最小分配RCU 最小调整RCU步长 组合应用(流运行) 运行中的Flow任务数量 30条 2 1 服务集成(API管理) API转发 1000TPS 2 1 托管API数量 100个 服务集成(数据API/函数API) 数据API/函数API转发
后端服务调用失败 原因分析 可能是以下三种原因导致，请逐一排查： 后端服务地址错误。 后端超时时间设置不合理。 当后端服务没有在设置的后端超时时间内返回时，API网关提示后端服务调用失败。 如果“后端服务地址”在ECS（Elastic Cloud Server），ECS的安全组无法被外部访问。
以上组件中，FDI、APIC、MQS、LINK为必选组件，ABM、BFS为增强版可选组件。 检查与IEF、SWR、OBS和AOM四个服务通信。如果您的虚拟机节点所在环境配置了网闸或网络限制，可以根据如何获取IEF云端服务IP地址获取IP地址进行配置。 离线版软件获取与安装方法 获取软件RPM离线安装包需要找
Management，简称IAM）是云服务平台的身份管理服务，包括用户身份认证、权限分配、访问控制等功能。 通过统一身份认证服务，实现对ROMA Connect的访问控制。 云监控服务 云监控服务（Cloud Eye）是云服务平台提供的安全、可扩展的统一监控方案，通过云监控服务集中监控ROMA C
ROMA Connect数据集成适用于异构数据源之间的数据类型转换和按需集成。对于业界主流数据库之间的数据迁移、同步场景，建议使用数据复制服务DRS；对于关系型数据库、大数据、文本等数据迁移到数据湖的场景，建议使用云数据迁移CDM。 表1 接入数据源 数据源接入配置 普通任务支持的集成模式（源端）
源端为MongoDB的配置与MySQL的类似，配置示例可参考MySQL配置示例。 OBS 返回页首 任务的“集成模式”为“定时”时，可以选择OBS（对象存储服务）作为源端数据源，具体配置如下。 表9 源端OBS信息 参数 配置说明 Path 填写OBS数据源中，要获取数据所在的对象名。Path的值不能以斜杠（/）结尾。
K代码示例调试功能。 URI GET /v2/{project_id}/instances/{instance_id}/assets/jobs/{job_id} 表1 路径参数 参数 是否必选 参数类型 描述 instance_id 是 String 实例ID。 project_id
标系统的能力来确保数据一致性。 数据源采集文件时，并发任务支持的总文件大小不超过800M。 说明： 仅适用于OBS、FTP、MRS HDFS数据源。例如，并发执行2个OBS任务，2个FTP任务，则4个任务累加起来的文件大小不能超过800M。 FTP数据源类型 FTP数据源解析模式
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
