内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • BigData之HiveHive数据管理的简介、下载、案例应用之详细攻略

    BigData之HiveHive数据管理的简介、下载、案例应用之详细攻略         目录 Hive数据管理的简介 1、Hive的适用场景——不适合那些需要高实性的应用(不能够在大规模数据集上实现低延迟快速的查询)、不适合用

    作者: 一个处女座的程序猿
    发表时间: 2021-03-26 16:51:04
    2062
    0
  • Hive 性能调优大全

    前言Hive 作为大数据领域常用的数据仓库组件,在平时设计和查询的时候要特别注意效率 。影响 Hive 效率的几乎从不是数据量过大,而是数据倾斜、数据冗余、Job或I/O过多、MapReduce 分配不合理等等。 对Hive 的调优既包含 Hive 的建表设计方面,对 HiveHQL

    作者: yd_66103469
    发表时间: 2024-08-27 11:56:32
    49
    0
  • Hive考试练习题

    二、搭建hive运行环境(50分,每项5分) 1、解压【/opt/soft/】文件夹下的【apache-hive-2.1.0-bin.tar.gz】文件 2、修改【apache-hive-2.1.0-bin】文件夹的名称为【hive】 3、拷贝【/opt/soft/hive/conf】文件夹下的【hive-env

    作者: 红目香薰
    发表时间: 2022-07-29 02:19:39
    238
    0
  • MRS中Hive加解密咨询

    请问MRS中的Hive支持行,列加密存储么?

    作者: AI之旅
    1972
    1
  • Hive的JDBC接口调用样例

    介绍如何调试Hive的JDBC接口调用样例

    播放量  820
  • Hive快速入门系列(19) | Hive性能调优 [六] JVM重用

      此次博主为大家带来的是Hive性能调优中的JVM重用。   JVM重用是Hadoop调优参数的内容,其对Hive的性能具有非常大的影响,特别是对于很难避免小文件的场景或task特别多的场景,这类场景大多数执行时间都很短。   Hadoop的默认配置通常是使用派生JVM来执行m

    作者: 不温卜火
    发表时间: 2020-12-02 00:20:39
    5269
    0
  • 开源Hive部署指导书

    s://archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin.tar.gz](https://archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin

    作者: 真我Realme
    10278
    0
  • hive on tez 调整map数量问题

    我使用tez引擎执行hivesql,其中有一张大表和两张小表,读大表时只开启了9个map,导致整个sql运行时间卡在了这个阶段,如下图map1。请问,MRS3上的Tez(0.9.2)怎么调整map的数量啊?非常感谢支持。

    作者: yumingde
    4209
    2
  • sql on anywhere---hive常用命令

    切换当前使用的数据库Use database_name;5      显示当前库下的所有表Show tables;6      在当前查看其它库中的表;Show tables in database_name;7      查看表定义Desc formatted table_

    作者: 卖报的小行家BAL
    1664
    1
  • 使用 Hive 构建数据仓库

    计而不是技术。尽管如此,Hive 并不真正是一个数据仓库。它甚至并不真正是一个数据库。您可以使用 Hive 构建和设计一个数据仓库,也可以使用 Hive 构建和设计数据库表,但存在的一些限制需要提供许多解决办法,并且将会带来一些挑战。例如,索引在 Hive 中有一些限制。如何克服这个问题呢?您可以使用

    作者: sunnyman218
    发表时间: 2019-05-05 10:22:30
    8223
    0
  • Hive优化(十一)-常用参数

    常用参数 // 输出合并小文件 SET hive.merge.mapfiles = true; -- 默认true,在map-only任务结束时合并小文件 SET hive.merge.mapredfiles = true; -- 默认false,在map-reduce任务结束时合并小文件

    作者: 百忍成金的虚竹
    发表时间: 2021-03-25 17:55:12
    1411
    0
  • 基于FI/MRS平台使使用客户端连接hive和hdfs认证问题总结

    /FI集群的hive ,中间经常会遇到一些问题。该部分总结基于安全模式的FusionInsight平台或者安全模式的MRS集群§ 建立hive数据连接时的认证问题§ driver端进行hive认证首先要知道hive用户的keytab位置、kdc.conf位置和hive用户名(用户

    作者: breakDawn
    发表时间: 2020-05-30 11:22:42
    6351
    0
  • Hadoop学习--Hive安装与配置

    最近在学习Hive的安装与使用,第一次使用还是遇到了很多问题。下面介绍下具体的过程。 开发环境: ubuntu10.04  jdk:1.7.0_40 Hadoop:1.2.1 1、下载安装包 首先从http://hive.apache.org/downloads

    作者: 格图洛书
    发表时间: 2021-12-30 14:37:16
    742
    0
  • Hive应用移植指南V1.0

    编译完成的jar包替换到自己搭建的maven仓库和本地仓库中。 # 6 Hive编译 **步骤 1** 下载Hive安装包。 ``` wget https://github.com/apache/hive/archive/rel/release-3.0.0.tar.gz ``` **步骤

    作者: 真我Realme
    4188
    0
  • Hive 3.0.0 移植指南 (CentOS7.4)

    本地仓库中。编译Hive步骤 1      下载Hadoop安装包。wget https://github.com/apache/hive/archive/rel/release-3.0.0.tar.gz步骤 2      解压安装包。tar -zxf hive-3.0.0.tar

    作者: 真我Realme
    4635
    3
  • HIVE优化(四)-union all

    HIVE 优化?【常考题】 如果union all的部分个数大于2,或者union部分数据量大,应拆分成多个insert into语句。 1.参数优化,小于6M自动合并 2.加功能,改成分区表,做join写成任务流 3.mapjoin 4.加索引 5.先where 再join 6

    作者: 百忍成金的虚竹
    发表时间: 2021-03-25 16:55:08
    1837
    0
  • Hive快速入门系列(14) | Hive性能调优 [一]Fetch抓取与本地模式

    \color{#FF0000}{Hive中对某些情况的查询可以不必使用MapReduce计算} Hive中对某些情况的查询可以不必使用MapReduce计算。例如:SELECT * FROM employees;在这种情况下,Hive可以简单地读取employee对应的存储目录下的文件,然后输出查询结果到控制台。

    作者: 不温卜火
    发表时间: 2020-12-02 22:40:11
    3657
    0
  • Windows10配置运行Hive-HiveServer2(非WSL模式)

    cmd 启动HiveServer2 set $env:LANG=zh_CN.UTF-8 $env:HIVE_HOME\bin\hive.cmd --service hiveserver2 start 其他问题 hiveserver2启动找不到curator相关类 原因:hive lib目录下默认没有这些lib,原因暂时不明

    作者: BUG开发工程师
    发表时间: 2020-11-27 11:27:18
    9929
    0
  • Hive导入数据与导出数据

    from '表名'; 导出时可以指定分隔符格式 2.Hadoop 命令 hive>dfs -get 数据路径 要导出的路径 注意是在Hive 里面执行 3.Hive Shell 命令 linux]$ hive -e 'select * from '表名'> 路径+文件名 4.export

    作者: kala_1314
    发表时间: 2019-01-18 17:11:54
    3806
    0
  • Hive执行脚本: Return Code 2 from org.apache.hadoop.hive.ql.exec.MapR

    log日志文件「该日志文件内容是比较简略的」 hive.log 在缺省情况下 存储位置是:/tmp/「当前用户名字」/hive.log 缺省情况下该日志文件目录查找方法: 可以在Hive安装目录下的 conf/hive-log4j.properties中查看 hive-log4j.properties内容如下:

    作者: 7&
    发表时间: 2023-01-16 02:41:46
    87
    0