检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
获取数据源配置文件 MRS Hive MRS HDFS MRS HBase MRS Kafka 父主题： 附录
上传文件 单击“上传文件”，上传本地文件配置文件。 支持文件类型为：.yaml,.json, 文件个数最大值为：20, 单个文件大小的最大值为：20MB, 完成数据源接入配置后，单击“测试连接”，检测ABM与数据源之间是否能够连通。 若测试结果为“测试连接成功！”
如果是采集多个文件，目标端数据库有主键且主键相同的情况下，每次都会更新成时间最早的文件里的值，即数据内容没有变化。因为从OBS获取多个文件默认按照时间降序排序，先解析最晚上传的文件，所以最早上传的文件最后解析，这样就会导致任务执行结束后，数据库中的值还是最早上传的文件中的值。
将上述获取到的文件放到一个新的目录下，并打包成zip文件，所有文件位于zip文件的根目录下。 文件名只能由英文字母或数字组成，长度不超过255个字符。 文件大小不超过2MB。 父主题： 获取数据源配置文件
生成MRS Hive配置文件。 将上述获取到的文件放到一个新的目录下，并打包成zip文件，所有文件位于zip文件的根目录下。 文件名只能由英文字母或数字组成，长度不超过255个字符。 文件大小不超过2MB。 父主题： 获取数据源配置文件
生成MRS HDFS配置文件。 将上述获取到的文件放到一个新的目录下，并打包成zip文件，所有文件位于zip文件的根目录下。 文件名只能由英文字母或数字组成，长度不超过255个字符。 文件大小不超过2MB。 父主题： 获取数据源配置文件
生成MRS HBase配置文件。 将上述获取到的文件放到一个新的目录下，并打包成zip文件，所有文件位于zip文件的根目录下。 文件名只能由英文字母或数字组成，长度不超过255个字符。 文件大小不超过2MB。 父主题： 获取数据源配置文件
OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ 任务配置时源端OBS的元数据填写顺序必须与CSV文件中列的顺序一致，需修改任务配置，按照文件中列的顺序填写元数据。 父主题： 数据集成普通任务
勾选：使用导入文件中定义的扩展信息覆盖掉系统已有信息。 不勾选：使用系统已有扩展信息，不使用导入文件中的扩展信息。 导入参数 选择并检查导入文件。 单击“文件”，选择本地要导入的YAML或JSON格式API定义文件。
导入导出API ROMA Connect支持通过文件的方式导入导出API。 导入API：支持导入YAML和JSON格式API定义文件，且文件内容应满足Swagger 2.0规范。 导出API：支持导出YAML和JSON格式API定义文件。
导入导出自定义后端 ROMA Connect支持通过文件的方式导入导出自定义后端。 导入自定义后端：支持导入YAML和JSON格式API定义文件，且文件内容应满足Swagger 2.0规范。 导出自定义后端：支持导出YAML和JSON格式API定义文件。
导入导出自定义后端 概述 ROMA Connect支持通过文件的方式导入导出自定义后端。 导入自定义后端：支持导入YAML和JSON格式API定义文件，且文件内容应满足Swagger 2.0规范。 导出自定义后端：支持导出YAML和JSON格式API定义文件。
概述 业务场景 ROMA Connect支持把实例的应用和任务以资产文件形式导出，也可以把资产文件导入ROMA Connect，实现集成资产的快速恢复或迁移，资产文件的导入导出操作请参见导入导出资产。
SFTP也被称为SSH文件传输协议，它提供了一个安全的连接来传输文件，并在本地和远程系统上遍历文件系统。 默认情况下，FTP协议使用TCP端口中的20和21这两个端口，其中20端口用于传输数据，21端口用于传输控制信息（命令）。
支持的动作 写入文件 配置参数 参数 说明 目录路径 填写FTP服务器下文件的相对路径。 文件名 填写需要写入的文件名。 写入内容 填写需要写入的内容。 写入策略 选择需要写入的策略 覆写：覆盖同名文件内容; 追加：在同名文件末尾追加内容; 备份：备份同名文件，后缀为执行时间。
Filebeat相关目录和配置文件。
expire_logs_days为Binlog日志文件保留时间，超过保留时间的Binlog日志会被自动删除，应保留至少2天的日志文件。
API调用日志文件最大为200MB，达到上限后会自动生成新的日志文件，以每天产生5个或10个新日志文件为例，Filebeat和ELK对服务器的资源需求如表1所示。
解决方案 修改在创建MRS Hive数据源时上传的hdfs-site.xml文件中，在hdfs-site.xml文件中添加dfs.client.use.datanode.hostname配置项，值设为true，修改完成后上传修改后的配置文件，重新创建MRS Hive数据源。
解决方案 将MRS Hive的服务端机器绑定EIP，在配置文件中将IP换成EIP，在hdfs-site.xml文件中添加“dfs.client.use.datanode.hostname”配置项，值设为“true”。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
