检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
false [true,false] spark.sql.statistics.histogram.numBins 生成的直方图的槽位数。
false [true,false] spark.sql.statistics.histogram.numBins 生成的直方图的槽位数。
根据客户端或者是元数据节点的调度存储和检索数据，定期向元数据及客户端发送所存储的文件块的列表。 文件块 HDFS中存储的最小逻辑单元。每个HDFS文件由一个或多个文件块存储。所有的文件块存储在DataNode中。 文件块副本 一个副本是存储在HDFS中的一些文件块拷贝件。
安装时自动生成目录。
按实现方式，UDF有如下分类： 普通的UDF，用于操作单个数据行，且产生一个数据行作为输出。 用户定义聚集函数UDAF（User-Defined Aggregating Functions），用于接受多个输入数据行，并产生一个输出数据行。
勾选“仅保存到如下路径”，使用默认保存路径，文件生成后将保存在集群主OMS节点的“/tmp/FusionInsight-Client”目录下。 图3 下载集群客户端提示框 单击“确定”后，等待客户端软件生成成功。
说明： 基于安全考虑，服务端只支持TLS V1.2及以上的加密协议。
如果该目录下拥有100万文件不正常，需要清理不需要的文件。 父主题： 使用HDFS
具有复杂分组语法（GROUPING SETS、CUBE或ROLLUP）的查询只从基础数据源读取一次，而使用UNION ALL的查询将读取基础数据三次。这就是当数据源不具有确定性时，使用UNION ALL的查询可能会产生不一致的结果的原因。
（仅MRS 3.x及之后版本需配置该参数） 当前已使用的文件数的数据采集周期为1个小时，因此超过文件数阈值的告警上报会存在延迟。 存储空间配额 ：填写租户目录的存储空间大小。 为了保证数据的可靠性，HDFS中每保存一个文件则自动生成1个备份文件，即默认共2个副本。
图2 idea terminal输入“mvn clean install” 编译完成，打印“BUILD SUCCESS”，生成target目录，生成jar包在target目录中。 准备依赖的Jar包。
确认删除无用的文件后，等待文件在垃圾站中超过保留时间后（NameNode的配置参数“fs.trash.interval”指定了垃圾站中数据的保留时间），检查本告警是否清除。 删除文件为高危操作，在执行操作前请务必确认对应文件是否不再需要。 是，处理完毕。 否，执行9。
在Hue WebUI使用文件浏览器 操作场景 用户需要使用图形化界面管理HDFS文件时，可以通过Hue完成任务。 Hue界面主要用于文件、表等数据的查看与分析，禁止通过Hue界面对操作对象进行删除等高危管理操作。
HDFS文件同分布的特性，将那些需进行关联操作的文件存放在相同数据节点上，在进行关联操作计算时避免了到别的数据节点上获取数据，大大降低网络带宽的占用。
在“pom.xml”所在目录将生成lib文件夹，其中包含样例项目所依赖的jar包。 执行Jar包。
可以使用密钥方式也可以使用密码方式登录Linux弹性云服务器，详情请参见登录MRS集群节点。 父主题： 业务选型
需要在运行样例代码的本机hosts文件中设置访问节点的主机名和公网IP地址映射，主机名和公网IP地址请保持一一对应。 仅JDBC样例程序支持在本地Windows中运行。
操作步骤 在Hive客户端进行如下设置： set hive.map.aggr=true; 注意事项 Group By数据倾斜 Group By也同样存在数据倾斜的问题，设置hive.groupby.skewindata为true，生成的查询计划会有两个MapReduce Job，第一个
需要在运行样例代码的本机hosts文件中设置访问节点的主机名和公网IP地址映射，主机名和公网IP地址请保持一一对应。 仅JDBC样例程序支持在本地Windows中运行。
需要在运行样例代码的本机hosts文件中设置访问节点的主机名和公网IP地址映射，主机名和公网IP地址请保持一一对应。 仅JDBC样例程序支持在本地Windows中运行。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
