检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Infinity (1 row) --删除表 DROP TABLE float_t1; 当小数部分为0时,可以通过cast()转为对应范围的整数处理,小数部分会四舍五入。 示例: select CAST(1000.0001 as INT); _col0 ------- 1000 (1 row)
用于注册sql解析器。 org.apache.spark.sql.hbase.HBaseSQLParser spark.shuffle.manager 处理数据的方式。有两种实现方式可用:sort和hash。sort shuffle对内存的使用率更高,是Spark 1.2及后续版本的默认选项。
Spark常用配置参数 概述 本节介绍Spark使用过程中的常用配置项。以特性为基础划分子章节,以便用户快速搜索到相应的配置项。如果用户使用MRS集群,本节介绍的参数大部分已经适配好,用户无需再进行配置。少数需要用户根据实际场景配置的参数,请参见快速配置Spark参数。 配置Stage失败重试次数
file文件格式。 BINARY_FILE:以二进制流的方式导入文件,可以导入任何格式的文件。 文件分割方式 选择按FILE文件或SIZE大小分割源文件成多份,作为数据导出的MapReduce任务中各个map的输入文件。 Map数 配置数据操作的MapReduce任务中同时启动的map数量。不可
支持人员征得您同意后会请您提供密码,登录MRS集群进行问题排查。 集群处于异常状态时,MRS仍然会收取集群费用。建议您及时联系技术支持人员处理集群异常。 MRS集群运行限制 表2 MRS集群运行约束说明 限制项 说明 节点管理 当MRS集群中某一个Master节点关闭后,如果仍然
约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 availability_zone 是 String 参数解释: 可用分区名称,不支持多AZ集群。可用分区信息请参见终端节点。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 security_groups_id 否