已找到以下 10000 条记录
  • 如何对Hive表大小数据进行监控 - MapReduce服务 MRS

    如何对Hive表大小数据进行监控 问题 如何对Hive中的表大小数据进行监控? 回答 当用户要对Hive表大小数据进行监控时,可以通过HDFS的精细化监控对指定表目录进行监控,从而到达监控指定表大小数据的目的。 前提条件 Hive、HDFS组件功能正常 HDFS精细化监控功能正常

  • 配置Hive数据连接

    不同集群间Hive元数据切换时,MRS当前只对Hive组件自身的元数据数据库中的权限进行同步。这是由于当前MRS上的权限模型是在Manager上维护的,所以不同集群间的Hive元数据切换,不能自动把用户/用户组的权限同步到另一个集群的Manager上。

  • Presto配置多Hive连接 - MapReduce服务 MRS

    添加名为myhive的connector。 在connector-customize中添加配置: myhive.connector.name=hive-hadoop2 myhive.hive.metastore.uri=thrift://{目标集群的Hive Metastore

  • 配置Hive表、列或数据库的用户权限 - MapReduce服务 MRS

    FUNCTION Hive管理员权限(Hive Admin Privilege) DROP FUNCTION Hive管理员权限(Hive Admin Privilege) ALTER DATABASE Hive管理员权限(Hive Admin Privilege) 父主题: Hive用户权限管理

  • Hive 常用函数

    Hive数据库中内置一些常用的函数,同时hive也支持自定义函数。hive自定义函数,主要是通过java编程实现,因为hive是java所写的。下面主要是介绍一些hive当中的一些常用的函数的使用。通过对函数的学习,有利于对于hive的业务操作。步骤 1 首先执行环境变量。 > source

    作者: wuweibang
    2375
    0
  • HIVE】【hive对接】Kettle7.1如何对接MRS-HIVE

    【问题描述】:已通过FI客户端替换kettle中Hive相关jar,core-site.xml文件,无法连接,是否为kettle版本问题?【截图信息】:数据库连接配置:测试连接报错:

    作者: szh
    2358
    5
  • Hive简介

    当列很多或者数据量很大时,如果select *或者不指定分区,全列扫描和全表扫描效率都很低。 Hive中与列裁剪优化相关的配置项是hive.optimize.cp,与分区裁剪优化相关的则是hive.optimize.pruner,默认都是true。在HiveSQL解析阶段对应的则是ColumnPruner逻辑优化器。

    作者: xiatch
    发表时间: 2022-05-31 11:23:07
    671
    0
  • 创建Hive角色 - MapReduce服务 MRS

    创建Hive角色 操作场景 该任务指导MRS集群管理员在Manager创建并设置Hive的角色。Hive角色可设置Hive管理员权限以及Hive数据表的数据操作权限。 用户使用Hive并创建数据库需要加入hive组,不需要角色授权。用户在Hive和HDFS中对自己创建的数据库或表

  • 创建Hive表 - MapReduce服务 MRS

    建表时配置Hive数据加密 指定表的格式为RCFile(推荐使用)或SequenceFile,加密算法为ARC4Codec。SequenceFile是Hadoop特有的文件格式,RCFile是Hive优化的文件格式。RCFile优化了列存储,在对大表进行查询时,综合性能表现比SequenceFile更优。

  • Hive用户权限说明 - MapReduce服务 MRS

    与传统关系型数据库类似,MRS的Hive数据库包含“建表”和“查询”权限,Hive表和列包含“查询”、“插入”和“删除”权限。Hive中还包含拥有者权限“OWNERSHIP”和“Hive管理员权限”。 Hive数据文件权限,即HDFS文件权限。 Hive的数据库、表对应的文件保存在HDF

  • Hive概述

    据进行校验,从而提高加载速度,在查询时验证,不符合格式的数据设置为NULL。Hive不支持OLTP(联机事务处理),更接近OLAP(联机分析技术)工具。因为Hive任务的启动过程需要较长时间, Hive查询延时比较严重。4.     Hive架构MetaStore:存储表,列和分

    作者: IisAf1sh
    发表时间: 2020-05-20 11:20:35
    9398
    0
  • Hive概述

    <align=left><b>Hive的应用场景</b></align><align=left> Hive通常是构建于Hadoop之上,Hadoop在作业提交和调度的时候都有较高的延迟,因此Hive并不适合那些需要低延迟的应用。并且Hive不提供基于行级的数据更新操作,所以也

    作者: 雨化微尘
    20913
    5
  • Hive用户权限说明 - MapReduce服务 MRS

    种。 Hive元数据权限。 与传统关系型数据库类似,MRS的Hive数据库包含“建表”和“查询”权限,Hive表和列包含“查询”、“插入”和“删除”权限。Hive中还包含拥有者权限“OWNERSHIP”和“Hive管理员权限”。 Hive数据文件权限,即HDFS文件权限。 Hiv

  • Pyhive连接hive时出错:thrift.transport.TTransport.TTransportException:

            pip install PyHive 问题描述 导入pyhive包,connection连接hive时,报以下错误: thrift.transport.TTransport.TTransportException: Could not start SASL: b’Error

    作者: 风一样的美男子
    发表时间: 2022-12-20 02:12:58
    280
    0
  • Hive CBO原理介绍 - MapReduce服务 MRS

    Hive CBO原理介绍 Hive CBO原理介绍 CBO,全称是Cost Based Optimization,即基于代价的优化器。 其优化目标是: 在编译阶段,根据查询语句中涉及到的表和查询条件,计算出产生中间结果少的高效join顺序,从而减少查询时间和资源消耗。 Hive中实现CBO的总体过程如下:

  • Hive开源增强特性 - MapReduce服务 MRS

    IN权限。 Hive开源增强特性:支持数据库授权 Hive开源社区版本只支持数据库的拥有者在数据库中创建表。MRS Hive支持授予用户在数据库中创建表“CREATE”和查询表“SELECT”权限。当授予用户在数据库中查询的权限之后,系统会自动关联数据库中所有表的查询权限。 Hive开源增强特性:支持列授权

  • Hive对接OBS

    export PATH=$HIVE_HOME/bin:$PATH 配置Hive。 重命名/opt/hive-2.3.3/conf/hive-env.sh.template为hive-env.sh。 重命名opt/hive-2.3.3/conf/hive-log4j2

  • Hive on spark参数

    Hive on Spark参数介绍Hive on Spark 功能增加的参数,具体含义如下:         hive.spark.client.future.timeoutHive client请求Spark driver的超时时间,如果没有指定时间单位,默认是秒。        

    作者: Chijago
    发表时间: 2020-11-12 11:17:05
    6824
    0
  • Hive基础08、Hive引入Struct结构体

    ​ &nbsp;点击并拖拽以移动点击并拖拽以移动​编辑 Hive基础08、Hive引入Struct结构体 1、建表语句 创建一个温良贤淑女子的表 英文关键字解析: 1、CREATE TABLE 创建一个指定名字的表,如果库中已有相同名的表,则抛出异常;用户可以使用 IF NOT

    作者: 红目香薰
    发表时间: 2022-07-29 02:15:56
    198
    0
  • Hive简介

    而使用Hive来完成WordCount,只需要3条HQL语句。 Hive提供了两种命令行工具,CLI与Beeline,分别对应hive与beeline命令。CLI一般在Hive主机上使用,而Beeline支持远程连接。使用Beeline需要首先在Hive主机中启动HiveServer2服务。

    作者: 黄生
    发表时间: 2023-09-12 08:32:53
    105
    1