内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • Hive msck报错案例

    (state=08S01,code=1)。2.   问题定位查看HiveServer日志/var/log/Bigdata/hive/hiveserver/hive.log,发现目录名不符合分区格式:3.   解决方案(1)删除错误的文件或目录。(2)set hive.msck.path.validati

    作者: IisAf1sh
    4244
    0
  • Hive 插入大量数据

    Hive 插入大量数据 简介 在大数据领域中,Hive是一个常用的数据仓库工具,可以方便地对大规模数据进行管理和分析。当需要将大量数据插入到Hive表中时,我们需要考虑一些优化策略,以提高插入性能和效率。 1. 使用分区表 在向Hive表中插入大量数据时,可以考虑使用分区表。通

    作者: 皮牙子抓饭
    发表时间: 2024-08-18 22:51:06
    102
    0
  • HIVE安装过程

    bash_profile参数:export HIVE_HOME=/home/hadoop/hive110export PATH=$HIVE_HOME/bin:$PATHexport HIVE_CONF_DIR=$HIVE_HOME/confexport HIVE_LIB=$HIVE_HOME/lib2、hive110/conf/hive-site

    作者: shs
    发表时间: 2018-12-17 11:31:34
    8065
    0
  • hive 解析 json 数据

    文章目录 hive 解析 json 数据1. 取出单个字段2 .同时取多个字段 hive 解析 json 数据 有这么两个函数:get_json_object()和json_tuple()

    作者: 孙中明
    发表时间: 2022-01-22 14:43:20
    662
    0
  • 【MRS产品】【hive 功能】hive运行报错堆栈深度超过限制

    【功能模块】HIVE模块【操作步骤&问题现象】1、hive运行作业报错堆栈深度超过限制2、stack depth limit exceeded【截图信息】【日志信息】(可选,上传日志内容或者附件)

    作者: marshal丶张
    4051
    3
  • Hive基础增强-(窗口函数)

    ##按需求查询 1.查询在2017年4月购买过的顾客及总人数 select name,count(*) over() from business where subString(orderdate,1,7)='2017-04' group by name; 2.查询顾客的购买明细及月购买总额

    作者: 百忍成金的虚竹
    发表时间: 2021-03-27 15:46:25
    1964
    0
  • Hive执行原理

    Hadoop大数据仓库HiveHive架构 Hive能直接处理我们输入的SQL(Hive SQL语法和数据库标准SQL略不同),调用MapReduce计算框架完成数据分析操作。 通过Hive Client(Hive的命令行工具,JDBC等)向Hive提交SQL命令: 若

    作者: JavaEdge
    发表时间: 2022-04-16 08:29:06
    1114
    0
  • 数据湖(十):Hive与Iceberg整合

    warehouse}/${当前建表使用的hive库}/${创建的当前iceberg表名} #在Hive中加载如下两个包,在向Hive中插入数据时执行MR程序时需要使用到 hive> add jar /software/hive-3.1.2/lib/iceberg-hive-runtime-0

    作者: Lansonli
    发表时间: 2022-06-25 22:54:13
    1227
    0
  • 伙伴使用MRS HIVE连接时失败

    伙伴使用驱动连接MRS HIVE时连接失败,原因目前定位出是因为驱动生成的服务端pricipal在kdc数据库中不存在,需要根据节点名重新生成principal,求指导

    作者: yd_253154036
    742
    3
  • hive查询常用命令

    as num from item group by item04) a group by item) b; 在Hive查询期间,将前面的查询结果保存为结果表,在结果表中查询数据 create table result as select b.item,b.total,case when

    作者: 没头脑
    发表时间: 2022-06-17 13:40:27
    228
    0
  • Hive环境的安装部署

    2.2 解压Hive使用解压命令解压hive:tar -zxvf apache-hive-1.0.0-bin.tar.gz修改解压包名称为hive:mv apache-hive-1.0.0-bin hive:2.3 修改hive配置hive-site.xmlhive-site.x

    作者: Smy1121
    发表时间: 2019-06-20 21:12:10
    3691
    0
  • Hive快速入门系列(8) | Hive的基本操作(不定期更新~)

    not exists ] myhive ; 12 说明:hive的表存放位置模式是由hive-site.xml当中的一个属性指定的 <name>hive.metastore.warehouse.dir</name> <value>/user/hive/warehouse</value>

    作者: 不温卜火
    发表时间: 2020-12-02 16:17:11
    1825
    0
  • Hive对接OBS文件系统

    s://hivetest/user/hive/warehouse/,其中“hivetest”为OBS桶名。 图1 hive.metastore.warehouse.dir配置 在左侧的导航列表中选择“HiveServer

  • Apache Drill对接FusionInsight Hive

    12:25000"  }}   其中hive.metastore.uris可在集群hive-site.xml文件中查到• 后台登陆drill,使用show databases命令查看数据库:   使用命令use huaweihive;使用hive连接:   使用命令show tables;查看hive表:   使用查询命令查询hive表:  

    作者: 晋红轻
    2369
    0
  • Hive高级特性-ACID特性

    set hive.support.concurrency=true; set hive.txn.manager= org.apache.hadoop.hive.ql.lockmgr.DbTxnManager; hive.exec.dynamic.partition

    作者: living
    发表时间: 2021-01-21 14:18:33
    2969
    0
  • Hive优化(十七)-严格模式

    严格模式 Hive提供了一个严格模式,可以防止用户执行那些可能意向不到的不好的影响的查询。 通过设置属性hive.mapred.mode值为默认是非严格模式nonstrict。开启严格模式需要修改hive.mapred.mode值为strict,开启严格模式可以禁止3种类型的查询。 <property>

    作者: 百忍成金的虚竹
    发表时间: 2021-03-25 15:49:49
    1596
    0
  • Linux下安装hive(2.3.3)详解及HiveSQL运行

    基于JDBC等协议:启动hiveserver2,通过jdbc协议可以访问hivehiveserver2支持高并发。 8. 启动hive  cd ./hive-2.3.3  ./bin/hive     9. 启动hiveserver2服务  ./bin/hiveserver2 &或者./bin/hive

    作者: Liuuuu
    发表时间: 2020-11-09 16:40:37
    9717
    0
  • hive用模糊查询是否影响效率

    hive具有sql数据库的外表,但应用场景完全不同,hive只适合用来做批量数据统计分析 查询语言。由于 SQL 被广泛的应用在数据仓库中,因此,专门针对 Hive 的特性设计了类 SQL 的查询语言 HQL。熟悉 SQL 开发的开发者可以很方便的使用 Hive 进行开发。

    作者: 孙中明
    发表时间: 2022-01-22 14:21:45
    785
    0
  • Hive经典简答题

    什么是Hive? Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能(HQL)。 2.HIve的意义(最初研发的原因) 减少开发人员的开发成本和学习成本。 3.Hive的内部组成模块,作用分别是什么

    作者: 大数据梦想家
    发表时间: 2021-09-28 17:43:33
    1049
    0
  • 大数据hive sqoop 部分笔记

    \ --password root \ --table tbltest \ --hive-table tbltest   4.查看表信息:desc 表名;desc formatted 表名;(查看更加详细)5.查看hive库:show databases;

    作者: 旧时光里的温柔
    1867
    3