MAPREDUCE服务 MRS-Loader作业目的连接配置说明:hdfs-connector

时间：2024-07-24 15:45:56

MAPREDUCE服务 MRS

表5 hdfs-connector目的连接属性
参数	说明
写入目录	最终数据在HDFS保存时的具体目录。必须指定一个目录。
文件格式	Loader支持HDFS中存储数据的文件格式，默认支持以下两种： CS V_FILE：表示文本格式文件。目的连接为数据库型连接时，只支持文本格式。 BINARY_FILE：表示文本格式以外的二进制文件。
压缩格式	文件在HDFS保存时的压缩行为。支持NONE、DEFLATE、GZIP、BZIP2、LZ4和SNAPPY。
是否覆盖	文件在导入HDFS时对写入目录中原有文件的处理行为，支持以下两种： True：默认清空目录中的文件并导入新文件。 False：不清空文件。如果写入目录中有文件，则作业运行失败。
换行符	最终数据的每行结束标识字符。说明： hdfs作为目的连接时，当“文件格式”配置为BINARY_FILE时，高级属性中的“换行符”配置无效。
字段分割符	最终数据的每个字段分割标识字符。说明： hdfs作为目的连接时，当“文件格式”配置为BINARY_FILE时，高级属性中的“字段分割符”配置无效。