sparksql 调优 内容精选 换一换
  • 数据库性能调优

    HCIP- GaussDB -OLTP V1.5系列课程。本课程主要讲述数据库性能的基本知识,阐述数据库方法,并基于GaussDB(for MySQL)讲解数据库理论。

    来自:其他

    查看更多 →

  • 运行SparkSql作业

    ”。 “作业类型”选择“SparkSql”并参考表1配置SparkSql作业信息。 图1 添加SparkSql作业 表1 作业配置信息 参数 描述 示例 作业名称 作业名称,只能由字母、数字、中划线和下划线组成,并且长度为1~64个字符。 sparksql SQL类型 SQL查询语句提交类型。

    来自:帮助中心

    查看更多 →

  • sparksql 调优 相关内容
  • 动态分区插入场景内存优化

    ${SOURCE}.store_returns distribute by sr_returned_date_sk; 父主题: Spark SQL性能

    来自:帮助中心

    查看更多 →

  • Spark动态分区插入场景内存优化

    ${SOURCE}.store_returns distribute by sr_returned_date_sk; 父主题: Spark SQL性能

    来自:帮助中心

    查看更多 →

  • sparksql 调优 更多内容
  • 基于多核并发&硬件加速实现大数据平台性能提升

    鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端,2. 鲲鹏大数据端到端调优

    来自:其他

    查看更多 →

  • Spark SQL概述

    本文介绍了【Spark SQL概述】相关内容,与您搜索的sparksql 调优 相关,助力开发者获取技术信息和云计算技术生态圈动态...请点击查阅更多详情。

    来自:其他

    查看更多 →

  • 九十四、Spark-SparkSQL(整合Hive)

    本文介绍了【九十四、Spark-SparkSQL(整合Hive)】相关内容,与您搜索的sparksql 调优 相关,助力开发者获取技术信息和云计算技术生态圈动态...请点击查阅更多详情。

    来自:其他

    查看更多 →

  • 数据库性能调优

    HCIP-GaussDB-OLTP V1.5系列课程。本课程主要讲述数据库性能的基本知识,阐述数据库方法,并基于GaussDB(for MySQL)讲解数据库理论。

    来自:其他

    查看更多 →

  • SparkSQL读取ORC表报错

    SparkSQL读取ORC表报错 问题现象 Hive创建ORC存储格式的表,用SparkSQL读取该表时报错: 原因分析 该问题为一个开源社区问题:https://issues.apache.org/jira/browse/HIVE-11102,使用开源的hive 1.2.1版本包就有可能触发此问题。

    来自:帮助中心

    查看更多 →

  • 配置SparkSQL业务用户权限

    配置SparkSQL业务用户权限 操作场景 SparkSQL业务还可能需要关联使用其他组件,例如spark on HBase需要HBase权限。以下介绍SparkSQL关联HBase服务的操作。 前提条件 完成Spark客户端的安装,例如安装目录为“/opt/client”。 获

    来自:帮助中心

    查看更多 →

  • SparkSQL建表参数规范

    SparkSQL建表参数规范 规则 建表必须指定primaryKey和preCombineField。 Hudi表提供了数据更新的能力和幂等写入的能力,该能力要求数据记录必须设置主键用来识别重复数据和更新操作。不指定主键会导致表丢失数据更新能力,不指定preCombineField会导致主键重复。

    来自:帮助中心

    查看更多 →

  • SparkSQL建表参数规范

    SparkSQL建表参数规范 规则 建表必须指定primaryKey和preCombineField。 Hudi表提供了数据更新的能力和幂等写入的能力,该能力要求数据记录必须设置主键用来识别重复数据和更新操作。不指定主键会导致表丢失数据更新能力,不指定preCombineField会导致主键重复。

    来自:帮助中心

    查看更多 →

  • 配置SparkSQL业务用户权限

    配置SparkSQL业务用户权限 操作场景 SparkSQL业务还可能需要关联使用其他组件,例如Spark on HBase需要HBase权限。以下介绍SparkSQL关联HBase服务的操作。 前提条件 完成Spark客户端的安装,例如安装目录为“/opt/client”。 获

    来自:帮助中心

    查看更多 →

  • 通过Hue执行SparkSQL

    在左侧导航栏单击,然后选择“SparkSql”,进入“SparkSql”。 “SparkSql”支持以下功能: 执行和管理SparkSql语句。 在“保存的查询”中查看当前访问用户已保存的SparkSql语句。 在“查询历史记录”中查看当前访问用户执行过的SparkSql语句。 执行SparkSql语句

    来自:帮助中心

    查看更多 →

  • 大数据技术学习——Spark

    本文介绍了【大数据技术学习——Spark】相关内容,与您搜索的sparksql 调优 相关,助力开发者获取技术信息和云计算技术生态圈动态...请点击查阅更多详情。

    来自:其他

    查看更多 →

  • 大数据入门学习框架

    本文介绍了【大数据入门学习框架】相关内容,与您搜索的sparksql 调优 相关,助力开发者获取技术信息和云计算技术生态圈动态...请点击查阅更多详情。

    来自:其他

    查看更多 →

  • 离线Compaction配置

    Compaction作业配置的资源,vcore数至少要大于等于单个分区的桶数,vcore数与内存的比例应为1:4即1个vcore配4G内存。 父主题: Bucket示例

    来自:帮助中心

    查看更多 →

  • 离线Compaction配置

    Compaction作业配置的资源,vcore数至少要大于等于单个分区的桶数,vcore数与内存的比例应为1:4即1个vcore配4G内存。 父主题: Bucket示例

    来自:帮助中心

    查看更多 →

  • MetaStore动态分区数超出阈值导致SQL报错

    执行set hive.exec.max.dynamic.partitions = XXX;命令大“hive.exec.max.dynamic.partitions”参数值。 SparkSQL中需要设置“spark.hadoop.hive.exec.max.dynamic.partitions”参数。

    来自:帮助中心

    查看更多 →

  • 鲲鹏应用性能测试及调优

    介绍了软件性能测试、Linux中性能监控统计的工具、常用软件的性能测试方法和华为鲲鹏系统性能优化工具。

    来自:其他

    查看更多 →

  • sparkSQL可以指定分区字段为varchar类型吗

    本文介绍了【sparkSQL可以指定分区字段为varchar类型吗】相关内容,与您搜索的sparksql 调优 相关,助力开发者获取技术信息和云计算技术生态圈动态...请点击查阅更多详情。

    来自:其他

    查看更多 →

共105条
看了本文的人还看了