检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
用户需要通过MySQL协议创建Broker Load 导入，并通过查看导入命令检查导入结果。适用以下场景： 源数据在Broker可以访问的存储系统中，如HDFS。 数据量在几十到百GB级别。 支持导入CSV、Parquet、ORC格式的数据，默认支持导入CSV格式数据。
ClickHouse 导入前清理数据 导入前清空原表的数据。“True”为执行清空，“False”为不执行。不配置此参数则默认不执行清空。 说明： 如果导入的表为ClickHouse分布式表，且需要清理数据时，请在导入前手动删除ClickHouse分布式表对应的本地表中的数据。
登录ClickHouse客户端连接导入数据的ClickHouse实例节点，执行查询命令查看导入的结果。
表列名 配置要导入的列，使Loader将列的内容全部导入。配置多个字段时使用逗号分隔。 分区列名 指定数据库表的一列，根据该列来划分要导入的数据，在map任务中用于分区。建议配置主键字段。
实现类注册器并手动注册类。
<系统域名> 系统随机生成 用于Kafka安全认证。 storm/hadoop.<系统域名> 系统随机生成 Storm系统启动用户。 storm_zk/hadoop.<系统域名> 系统随机生成 用于Worker进程访问ZooKeeper。 flink/hadoop.
用户可登录FusionInsight Manager，选择“系统 > 权限 > 域和互信”，查看“本端域”参数，即为当前系统域名。 “hive/hadoop.<系统域名>”为用户名，用户的用户名所包含的系统域名所有字母为小写。 执行如下命令，启用Hive admin权限。
<系统域名>@<系统域名> --keytab ${BIGDATA_HOME}/FusionInsight_Spark2x_8.1.0.1/install/FusionInsight-Spark2x-3.1.1/keytab/spark2x/SparkResource/spark2x.keytab
用户需要通过MySQL协议创建Broker Load导入，并通过查看导入命令检查导入结果。适用以下场景： 源数据在Broker可以访问的存储系统中，如OBS。 数据量在几十到百GB级别。 支持导入CSV、Parquet、ORC、JSON格式的数据，默认支持导入CSV格式数据。
表4 输出设置参数 参数名 说明 示例 文件类型 文件导入后保存的类型： “TEXT_FILE”：导入文本文件并保存为文本文件 “SEQUENCE_FILE”：导入文本文件并保存在“sequence file”文件格式 “BINARY_FILE”：以二进制流的方式导入文件，可以导入任何格式的文件
用户可登录FusionInsight Manager，选择“系统 > 权限 > 域和互信”，查看“本端域”参数，即为当前系统域名。 “hive/hadoop.<系统域名>”为用户名，用户的用户名所包含的系统域名所有字母为小写。 执行如下命令，启用Hive admin权限。
<系统域名>@<系统域名> --keytab ${BIGDATA_HOME}/FusionInsight_Spark2x_8.1.0.1/install/FusionInsight-Spark2x-3.1.1/keytab/spark2x/SparkResource/spark2x.keytab
如果有active_thriftserver目录，执行get /thriftserver/active_thriftserver查看该目录下是否有注册的配置信息。 如果有注册的配置信息，联系华为云支持人员处理。
<系统域名> 说明： 用户可登录FusionInsight Manager，选择“系统 > 权限 > 域和互信”，查看“本端域”参数，即为当前系统域名。 client.keytab 使用keytab认证方式登录时，使用的keytab文件所在目录。
导入文本文件时才能配置。 UTF-8 后缀名 源文件导入成功后对输入文件增加的后缀值。该值为空，则表示不加后缀。数据源为文件系统，该参数才有效。用户若需增量导入数据建议设置该参数。
用户可登录FusionInsight Manager，选择“系统 > 权限 > 域和互信”，查看“本端域”参数，即为当前系统域名。“hive/hadoop.<系统域名>”为用户名，用户名所包含的系统域名所有字母为小写。 父主题： Hive负载均衡
图4 查看作业 父主题： 数据导入
<系统域名>@<系统域名>;saslQop=auth-conf;auth=KERBEROS;principal=spark2x/hadoop.<系统域名>@<系统域名>;" 执行以下命令，使用SparkSQL语句查询HBase表的数据。
<系统域名>@<系统域名>;saslQop=auth-conf;auth=KERBEROS;principal=spark2x/hadoop.<系统域名>@<系统域名>;" 执行以下命令，使用SparkSQL语句查询HBase表的数据。
如果Kafka所在集群的域名发生了更改，需要对${Flume客户端安装目录}/conf/flume-env.sh文件中的-Dkerberos.domain.name项的值做修改，具体请根据实际域名进行配置。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
