内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • Hive基础05、Hive引入数据

    ​  点击并拖拽以移动点击并拖拽以移动​编辑 Hive基础05、Hive引入数据 前提 Hive表中的数据不能通过insert语句插入,而是load data语句进行加载,其中加载的数据来源主要包括: 1、本地文件系统加载数据 2、HDFS文件系统加载数据 load

    作者: 红目香薰
    发表时间: 2022-07-29 02:14:18
    190
    0
  • 创建MRS HIVE连接

    创建MRS HIVE连接 1. 在连接管理界面单击“新建连接”,连接器类型选择“对象存储服务(OBS)”后,单击“下一步”配置OBS连接参数,如图2所示。 o 名称:用户自定义连接名称,例如“obslink”。 o OBS服务器、端口:配置为OBS实际的地址信息。

  • Hive概述

    1.     Hive介绍Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL的查询功能。Hive基本原理是将HQL语句自动转换成可以在计算引擎上执行的任务。Hive 在加载数据过程中不会对数据进行任何的修改,只是将数据移动到HD

    作者: AI资讯
    1776
    0
  • HIVE及MySQL安装

    0/share/hadoop/yarn/lib中的jline-0.9.94.jar,再次启动hive即可   HIVE的使用: [root@master lib]# hive   hive> show databases;  查看数据库 OK default Time taken: 0.976 seconds

    作者: 菜鸟级攻城狮
    发表时间: 2021-02-28 08:12:27
    4217
    0
  • Hive简介

    当列很多或者数据量很大时,如果select *或者不指定分区,全列扫描和全表扫描效率都很低。 Hive中与列裁剪优化相关的配置项是hive.optimize.cp,与分区裁剪优化相关的则是hive.optimize.pruner,默认都是true。在HiveSQL解析阶段对应的则是ColumnPruner逻辑优化器。

    作者: xiatch
    发表时间: 2022-05-31 11:23:07
    671
    0
  • HIVE】【hive对接】Kettle7.1如何对接MRS-HIVE

    【问题描述】:已通过FI客户端替换kettle中Hive相关jar,core-site.xml文件,无法连接,是否为kettle版本问题?【截图信息】:数据库连接配置:测试连接报错:

    作者: szh
    2365
    5
  • Pyhive连接hive时出错:thrift.transport.TTransport.TTransportException:

            pip install PyHive 问题描述 导入pyhive包,connection连接hive时,报以下错误: thrift.transport.TTransport.TTransportException: Could not start SASL: b’Error

    作者: 风一样的美男子
    发表时间: 2022-12-20 02:12:58
    280
    0
  • Hive on spark参数

    Hive on Spark参数介绍Hive on Spark 功能增加的参数,具体含义如下:         hive.spark.client.future.timeoutHive client请求Spark driver的超时时间,如果没有指定时间单位,默认是秒。        

    作者: Chijago
    发表时间: 2020-11-12 11:17:05
    6824
    0
  • Hive概述

    据进行校验,从而提高加载速度,在查询时验证,不符合格式的数据设置为NULL。Hive不支持OLTP(联机事务处理),更接近OLAP(联机分析技术)工具。因为Hive任务的启动过程需要较长时间, Hive查询延时比较严重。4.     Hive架构MetaStore:存储表,列和分

    作者: IisAf1sh
    发表时间: 2020-05-20 11:20:35
    9398
    0
  • Hive概述

    <align=left><b>Hive的应用场景</b></align><align=left> Hive通常是构建于Hadoop之上,Hadoop在作业提交和调度的时候都有较高的延迟,因此Hive并不适合那些需要低延迟的应用。并且Hive不提供基于行级的数据更新操作,所以也

    作者: 雨化微尘
    20913
    5
  • Hive基础08、Hive引入Struct结构体

    ​ &nbsp;点击并拖拽以移动点击并拖拽以移动​编辑 Hive基础08、Hive引入Struct结构体 1、建表语句 创建一个温良贤淑女子的表 英文关键字解析: 1、CREATE TABLE 创建一个指定名字的表,如果库中已有相同名的表,则抛出异常;用户可以使用 IF NOT

    作者: 红目香薰
    发表时间: 2022-07-29 02:15:56
    198
    0
  • Hive 常用函数

    Hive数据库中内置一些常用的函数,同时hive也支持自定义函数。hive自定义函数,主要是通过java编程实现,因为hive是java所写的。下面主要是介绍一些hive当中的一些常用的函数的使用。通过对函数的学习,有利于对于hive的业务操作。步骤 1 首先执行环境变量。 > source

    作者: wuweibang
    2383
    0
  • Hive简介

    而使用Hive来完成WordCount,只需要3条HQL语句。 Hive提供了两种命令行工具,CLI与Beeline,分别对应hive与beeline命令。CLI一般在Hive主机上使用,而Beeline支持远程连接。使用Beeline需要首先在Hive主机中启动HiveServer2服务。

    作者: 黄生
    发表时间: 2023-09-12 08:32:53
    105
    1
  • Hive对接OBS

    export PATH=$HIVE_HOME/bin:$PATH 配置Hive。 重命名/opt/hive-2.3.3/conf/hive-env.sh.template为hive-env.sh。 重命名opt/hive-2.3.3/conf/hive-log4j2

  • kettle如何连接hive

    doop hive 2-》根据hive的实际情况填入连接信息,连接名称随便填: 点击测试,弹出如下界面表示成功: 点击右下角确认后,将刚才创建的hive拖入右侧: 点击获取sql查询语句可以顺利获取hive中的表: 点击预览后,顺利查看hive表数据:

    作者: 小小明-代码实体
    发表时间: 2021-10-12 14:49:44
    2139
    0
  • Hive优化(十)-控制hive任务中的map数和reduce数

    主要的决定因素有:input的文件总个数,input的文件大小,集群设置的文件块大小(目前为128M,可在hive中通过set dfs.block.size;命令查看到,该参数不能自定义修改); 2)举例: a) 假设input目录下有1个文件a,大小为780M,那么had

    作者: 百忍成金的虚竹
    发表时间: 2021-03-25 17:12:50
    1684
    0
  • Hive】【ODBC】Hive-ODBC样例对接

    【功能模块】Hive-ODBC样例对接【操作步骤&问题现象】1、目前卡在了平台下用odbc连接这块,请问该报错是何种原因导致?2、HiveODBC能否实现Unicode接口,即支持中文?【截图信息】【日志信息】(可选,上传日志内容或者附件)

    作者: szh
    1153
    1
  • FusionInsight HIVE调优

    介绍Hive基本运维,常见调优思路,调优案例

    播放量  1264
  • Hive 和 Hudi

    Apache Hive 是一个建立在 Hadoop 之上的数据仓库基础设施,它提供了一种类似于 SQL 的查询语言(HiveQL),用于处理大规模的结构化数据。Hive 允许用户通过 SQL 语句来执行数据查询、汇总和分析,非常适合数据仓库和分析场景。Hive 的数据存储依赖于

    作者: 黄生
    145
    5
  • Flink使用HiveCatalog访问hive的鉴权问题

    "2.3.4"; HiveCatalog hive = new HiveCatalog(name, defaultDatabase, hiveConfDir, version); tableEnv.registerCatalog("myhive", hive); // set

    作者: Honor_xiaobing
    5664
    1