已找到以下 10000 条记录
  • Hive性能调优 - MapReduce服务 MRS

    Hive性能调优 建立Hive表分区提升查询效率 Hive Join数据优化 Hive Group By语句优化 Hive ORC数据存储优化 Hive SQL逻辑优化 使用Hive CBO功能优化查询效率 父主题: 使用Hive

  • Hive实现离线计算(HQL)

    点击并拖拽以移动 在hive cli命令窗口中查看hdfs文件系统 在hive cli命令窗口中查看本地文件系统 查看hive中输入的所有的历史命令 cat /home/当前用户/.hivehistory 点击并拖拽以移动 Hive数据仓库位置配置: 配

    作者: 芝士味的椒盐
    发表时间: 2022-04-23 02:43:11
    4765
    0
  • Apache Drill对接FusionInsight Hive

    12:25000"  }}   其中hive.metastore.uris可在集群hive-site.xml文件中查到• 后台登陆drill,使用show databases命令查看数据库:   使用命令use huaweihive;使用hive连接:   使用命令show tables;查看hive表:   使用查询命令查询hive表:  

    作者: 晋红轻
    2369
    0
  • hive建表4

    任务1:相似度检测 查询result表中,碱基对(aliLen)长度介于29800-29900之间的个数,截图并保存为3-1-alilen。查询result表中,按照匹配程度(identity)进行降序排序,显示sav,identity,bitScore这三个字段的前十行数据,截图并保存为3-2-bitscore。

    作者: 没头脑
    发表时间: 2022-06-18 00:22:35
    224
    0
  • Hive快速入门系列(9) | Hive表中数据的加载与导出

    /export/servers/exporthive/000000_0 /export/servers/exporthive/local.txt; 1 2.3 hive shell 命令导出 基本语法:(hive -f/-e 执行语句或者脚本 > file) bin/hive -e "select

    作者: 不温卜火
    发表时间: 2020-12-02 16:13:29
    2346
    0
  • Hive WebHCat接口介绍 - MapReduce服务 MRS

    本接口的使用需要前置条件,请参阅“开发规范”中的Hive规则。 /hive(POST) 描述 执行Hive命令 URL http://www.myserver.com/templeton/v1/hive 参数 参数 描述 execute hive命令,包含整个和短的Hive命令。 file 包含hive命令的HDFS文件。

  • Hive - 表格存储服务 CloudTable

    Hive 创建hive catalog 通过连接Hive Metastore,或者兼容Hive Metastore的元数据服务,Doris可以自动获取Hive的库表信息,并进行数据查询。 除了Hive外,很多其他系统也会使用Hive Metastore存储元数据。所以通过Hive

  • 配置Hive分区元数据冷热存储 - MapReduce服务 MRS

    5 and day <= 27; 查询含有冻结数据的表 查询当前数据库下的所有冻结表: show frozen tables; 查询指定数据库下的所有冻结表: show frozen tables in 数据库名称; 查询冻结表的冻结分区 查询冻结分区: show frozen partitions

  • 第1章Hive入门

    文章目录 第1章Hive入门1.1 什么是Hive1.2 Hive的优缺点1.2.1 优点1.2.2 缺点 1.3 Hive架构原理1.4 Hive和数据库比较 第1章Hive入门 1.1 什么是Hive Hive:由Facebook开源用于解决

    作者: 孙中明
    发表时间: 2022-01-22 15:09:38
    683
    0
  • 导入并配置HiveJDBC样例工程 - MapReduce服务 MRS

    导入并配置Hive JDBC样例工程 操作场景 为了运行MRS产品Hive组件的JDBC接口样例代码,需要完成下面的操作。 以在Windows环境下开发JDBC方式连接Hive服务的应用程序为例。 导入jdbc-example样例工程之后,需要将代码中USER_NAME = "x

  • 大数据技术学习——Hive

    p; Hive参数 参数优先级:配置文件&lt;命令行参数&lt;参数声明 配置文件方式:对本机启动的所有 Hive 进程都有效。 eg:用户自定义(hive-site.xml)会覆盖默认配置文件(hive-default.xml)。 命令行参数方式:仅对当前启动的Hive客户端窗口有效。

    作者: Eric Shi
    发表时间: 2023-02-25 09:58:40
    1642
    0
  • Hive 插入大量数据

    Hive 插入大量数据 简介 在大数据领域中,Hive是一个常用的数据仓库工具,可以方便地对大规模数据进行管理和分析。当需要将大量数据插入到Hive表中时,我们需要考虑一些优化策略,以提高插入性能和效率。 1. 使用分区表 在向Hive表中插入大量数据时,可以考虑使用分区表。通

    作者: 皮牙子抓饭
    发表时间: 2024-08-18 22:51:06
    102
    0
  • hive 解析 json 数据

    文章目录 hive 解析 json 数据1. 取出单个字段2 .同时取多个字段 hive 解析 json 数据 有这么两个函数:get_json_object()和json_tuple()

    作者: 孙中明
    发表时间: 2022-01-22 14:43:20
    662
    0
  • Hive连接 - 数据治理中心 DataArts Studio

    径,您也可以联系管理员获取此文件。使用集群配置前需在集群配置管理中配置此参数。 linkConfig.hiveVersion 是 枚举 Hive版本: HIVE_1_X HIVE_3_X linkConfig.user 否 String 登录Manager平台的用户名,使用集群配置时不用配置

  • 建立Hive表分区提升查询效率 - MapReduce服务 MRS

    建立Hive表分区提升查询效率 操作场景 Hive在做Select查询时,一般会扫描整个表内容,会消耗较多时间去扫描不关注的数据。此时,可根据业务需求及其查询维度,建立合理的表分区,从而提高查询效率。 操作步骤 MRS 3.x之前版本: 登录MRS控制台,在左侧导航栏选择“现有集群”,单击集群名称。选择“节点管理

  • Hive执行原理

    Hadoop大数据仓库HiveHive架构 Hive能直接处理我们输入的SQL(Hive SQL语法和数据库标准SQL略不同),调用MapReduce计算框架完成数据分析操作。 通过Hive Client(Hive的命令行工具,JDBC等)向Hive提交SQL命令: 若

    作者: JavaEdge
    发表时间: 2022-04-16 08:29:06
    1114
    0
  • Hive基础增强-(窗口函数)

    ##按需求查询 1.查询在2017年4月购买过的顾客及总人数 select name,count(*) over() from business where subString(orderdate,1,7)='2017-04' group by name; 2.查询顾客的购买明细及月购买总额

    作者: 百忍成金的虚竹
    发表时间: 2021-03-27 15:46:25
    1964
    0
  • Hive SQL编译原理(上)

    ava 4 Hive中解析过程 4.1 Hive的antlr语法文件 Hive工程的pom文件设置了使用antlr插件编译HiveLexer.g、HiveParser.g、HintParser.g文件 HiveLexer.g是Hive的词法文件,其中定义了Hive所有的关键字、

    作者: living
    发表时间: 2021-07-30 09:07:00
    2819
    0
  • Hive源码学习【1】——Windows WSL Hive3.x安装与调试(1)

    export&nbsp;PATH=$HIVE_HOME/bin:$PATHHive配置文件配置&nbsp;&nbsp;&nbsp;&nbsp;进入hive的conf目录,复制生成hive-site.xml文件cp&nbsp;hive-default.xml.template&nbsp;hive-site.

    作者: 想要一只猫
    发表时间: 2020-09-25 15:06:09
    3414
    0
  • Hive性能问题定位三板斧

    Hive性能问题总体定位思路1.1 概述Hive提供了Hadoop的SQL能力,主要参考标准的SQL,Hive进行了部分的修改,形成了自己的特有的SQL语法HQL(Hive SQL),更加适合于Hadoop的分布式体系,该SQL目前是Hadoop体系的事实标准。1.2 Hive

    作者: FI小粉丝
    6674
    1