检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ 任务配置时源端OBS的元数据填写顺序必须与CSV文件中列的顺序一致，需修改任务配置，按照文件中列的顺序填写元数据。 父主题： 数据集成普通任务
从OBS解析文件到RDS数据库，采集过一次后，后面采集会进行更新吗？ 如果是采集同一个文件，每次在OBS上更新文件，目标端数据库有主键情况下，每次会根据主键更新数据。 如果是采集多个文件，目标端数据库有主键且主键相同的情况下，每次都会更新成时间最早的文件里的值，即数据内容没有变化
接入OBS数据源 概述 ROMA Connect支持把OBS（对象存储服务）作为一个数据源，并用于数据集成任务。在使用OBS数据源前，您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下，在接入数据源前您需要有可用的集成应用，否则请提前创建集成应用。 操作步骤
OBS数据源测试连接失败 原因分析 可能是以下两种原因导致： 数据源地址未配置为Endpoint地址。 AK/SK和桶名称不正确。 解决方案 修改地址为Endpoint地址。 填写正确的AK/SK和桶名称。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。
获取图片方式为“URL路径”时，此处填写图片的URL路径。 目前支持： 公网HTTP/HTTPS URL。 华为云OBS提供的URL，使用OBS数据需要进行授权。包括对服务授权、临时授权、匿名公开授权。详情参见配置OBS服务的访问权限。 置信度 置信度的阈值（0~1），低于此置信数的标签，将不会返回。 标签数
对象存储服务 对象存储服务连接器用于对接华为云对象存储服务。 对象存储服务（Object Storage Service，简称OBS）是一个基于对象的海量存储服务，为您提供海量、安全、高可靠、低成本的数据存储能力。 创建对象存储服务连接 登录新版ROMA Connect控制台。
消息目的端：MQS Topic 数据集成规格在以下条件中测试得出： 分别执行以下三个任务场景，每个场景3个并发任务： mysql-mysql任务场景 obs-obs任务场景 kafka-kafka任务场景 读写100W数据 数据迁移量1G 服务集成规格在以下条件中测试得出： 后端类型：shubao
变更实例规格 如果当前使用的实例规格不能满足业务使用需要，或者需要开启或关闭某个集成能力，可通过调整RCU分配对集成能力进行动态的扩缩容。 约束与限制 消息集成当前仅支持扩容，不支持缩容，但是支持将RCU调整为0关闭消息集成能力。 关闭某个集成能力前，请确保该集成能力已不再被使用。 变更实例规格
K代码示例调试功能。 URI GET /v2/{project_id}/instances/{instance_id}/assets/jobs/{job_id} 表1 路径参数 参数 是否必选 参数类型 描述 instance_id 是 String 实例ID。 project_id
标系统的能力来确保数据一致性。 数据源采集文件时，并发任务支持的总文件大小不超过800M。 说明： 仅适用于OBS、FTP、MRS HDFS数据源。例如，并发执行2个OBS任务，2个FTP任务，则4个任务累加起来的文件大小不能超过800M。 FTP数据源类型 FTP数据源解析模式
在创建任务页面中配置异常数据存储信息。 表1 异常数据存储信息 参数 配置说明 集成应用 选择OBS数据源所属的集成应用。 源端数据类型 当前仅支持选择“OBS”。 数据源名称 选择已配置的OBS数据源。 Path 填写异常数据要存储到OBS数据源的对象名。Path的值不能以斜杠（/）结尾。 配置完成后，若
向DWS写入数据时越来越慢怎么解决 原因分析 查看界面上的采集数据，如果写入数据耗时在秒级，属于正常的情况。如果写入几千条数据超过5秒，一般是性能劣化的表现。 解决方案 如果对DWS的某个表频繁访问，会导致写入性能逐渐降低，需要对DWS进行调优，例如，定时使用analyze规划表、VACUUM
源端为MongoDB的配置与MySQL的类似，配置示例可参考MySQL配置示例。 OBS 返回页首 任务的“集成模式”为“定时”时，可以选择OBS（对象存储服务）作为源端数据源，具体配置如下。 表9 源端OBS信息 参数 配置说明 Path 填写OBS数据源中，要获取数据所在的对象名。Path的值不能以斜杠（/）结尾。
Site实例前，需要准备虚拟机资源、安装Docker、安装Haveged、配置NTP时间同步、挂载磁盘，以及检查虚拟机与ROMA Site、IEF、SWR、OBS以及AOM五个服务是否通信。 其中，使用智能边缘平台IEF的容器应用，需要单独付费，计费模式如下： 套餐包计费模式：即购买了套餐包。购买后
待提取图片暗水印的图片地址，当前只支持OBS对象，格式为 obs://bucket/object ，其中bucket为和当前项目处于同一区域的OBS桶名称，object为对象全路径名。例如：obs://hwbucket/hwinfo/hw.png，其中obs://表示OBS存储，hwbucket为桶名，hwinfo/hw
的源端和目标端。 对象存储服务 对象存储服务（Object Storage Service，简称OBS）是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力，可供用户存储任意类型和大小的数据。 ROMA Connect可以使用OBS作为数据集成任务的源
用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的MRS HIVE如何配置？ 从OBS解析文件到RDS数据库，采集过一次后，后面采集会进行更新吗？ OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ MRS Hive目标字段和源端字段数据类型不匹配时，数据是否能集成到目标端？
Server时可配置，在配置异常数据存储前，需要提前完成OBS数据源的接入配置，具体请参见接入OBS数据源。 在每次任务执行过程中，如果源端的某些数据符合集成条件，但因为网络抖动或其他异常等原因，无法顺利集成到目标端数据源，则ROMA Connect可以将这些数据以文本文件的形式存储在OBS中。 表3 异常数据存储信息
访问FTP服务协议类型。 sftp ftp 最小长度：4 最大长度：2147483647 address String 地址。 OBS (obs远端地址，obs数据源使用)。 MONGODB (MONGODB数据源类型主机IP地址，多个IP:PORT，使用","隔开)。 REDIS
定时，实时 - - 接入MRS HBase数据源 定时 定时，实时 - - 接入MRS Kafka数据源 实时 定时，实时 - - 接入OBS数据源 定时 定时 - - 接入Oracle数据源 定时 定时，实时 定时，实时 定时，实时 接入PostgreSQL数据源 定时 定时，实时
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
