内容选择
    内容分类
    学堂 博客 论坛 开发服务 开发工具 直播 视频 用户
    时间
    一周 一个月 三个月
    内容选择
    全部
    内容选择
    内容分类
    • 学堂
    • 博客
    • 论坛
    • 开发服务
    • 开发工具
    • 直播
    • 视频
    • 用户
    时间
    • 一周
    • 一个月
    • 三个月
    重置 确定

    • hive server客户端连接泄漏导致hs重启

           限制单个IP到HiveServer连接数：hiveserver支持限制每个客户端ip最大的连接数，以及每个用户在每个客户端ip的最大的连接数，超过配置值后抛出异常。 hive.server2.limit.connections.per

      开发者  >  博客
      作者： Nature_L
      发表时间： 2021-07-13 03:05:54
      2239
      0

    • Hive快速入门系列(11) | Hive的自定义函数

      info+"__, I love Hive! __ "; } } 12345678910111213141516171819 2. 将jar包添加到hive hive (myhive)> add jar /opt/module/hive/lib/hive_java.jar; 12

      开发者  >  博客
      作者： 不温卜火
      发表时间： 2020-12-02 16:06:14
      1676
      0

    • Hive提供远端主机ODBC连接吗

      如果部署好了MDS -Hive + Spark后，我想从我个人的物理电脑通过ODBC能访问到部署在huawei云上的Hive Server吗？如果可以的话，需要特定的ODBC Driver吗？

      开发者  >  其他
      作者： tonywendy
      6800
      1

    • 【mrs产品】【hive功能】springboot启动可以登录zk，hive连接执行语句报错

      hadoop.hive.conf.HiveConf.initialize(5430) - HiveConf of name hive.s3a.locals3.jceks does not exist[Thread-44] INFO  org.apache.hadoop.hive.conf

      开发者  >  其他
      作者： yd_214181370
      695
      1

    • Hive 元数据更新

      Hive 元数据更新 在大数据领域中，Hive 是一个常用的数据仓库工具，用于管理和查询大规模数据集。在使用 Hive 进行数据分析和处理时，经常需要更新元数据以确保数据的准确性和一致性。本文将介绍如何在 Hive 中进行元数据更新的相关操作。 什么是 Hive 元数据 在 Hive

      开发者  >  博客
      作者： 皮牙子抓饭
      发表时间： 2024-08-15 20:56:36
      74
      0

    • 2021年大数据Spark（三十一）：Spark On Hive

      Spark On Hive spark-sql中集成Hive Spark代码中集成Hive Spark On Hive Spark SQL模块从发展来说，从Apache Hive框架而来，发展历程：Hive（MapReduce）-> Shark (Hive on Spark)

      开发者  >  博客
      作者： Lansonli
      发表时间： 2021-09-27 15:25:51
      1121
      0

    • Hive语句综合练习

      经典SQL练习题 第一步区：创建mysql表 第二步：导入数据到mysql里面去 第三步：创建hive表与myslq表字段对应 第四步：导出myslq表的数据，加载到hive表里面去 第五步：翻译需求 1、查询"01"课程比"02"课程成绩高的学生的信息及课程分数 SELECT a.* ,b

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-03-25 16:52:25
      1719
      0

    • Spark---Spark on Hive

      点击并拖拽以移动 2）、启动Hive的metastore服务 hive --service metastore 点击并拖拽以移动 3）、启动zookeeper集群，启动HDFS集群 4）、启动SparkShell读取Hive中的表总数，对比hive中查询同一表查询总数测试时间 ./spark-shell

      开发者  >  博客
      作者： 前进的蜗牛
      发表时间： 2023-11-29 10:38:26
      11
      0

    • GaussDB(DWS)对接Hive

      注意，写入hadoop均是以overwrite方式写入,即每次都会覆盖对应数据表Hive访问从GaussDB(DWS)同步到hadoop数据 testhive > select * from pdm. t00_ccy_parm2;5、其他5.1 常见问题1）创建外表后查询报错 ERROR: Login failed

      开发者  >  其他
      作者： 你讲道理的说
      1175
      0

    • Hive存储格式简单介绍

      t无法分割和合并查询的效率最低,但加载数据的速度最高sequencefile行存储存储空间的消耗最大压缩的文件可以分割和合并查询效率高，但需要通过text文件转化来加载orc列存储 1.节省存储空间 2.查询效率高 3.压缩快parquet列存储压缩效率高 查询效率高支持Impa

      开发者  >  博客
      作者： kala_1314
      发表时间： 2019-01-18 16:37:43
      3582
      0

    • hive定位性能瓶颈

      1.使用HiveServer2 WebUI排除非大数据组件的问题 http://192.168.10.11:1002/hiveserver2.jsp http://192.168.10.11:10002/query_page?operationId=4e64ae44-5ec3-4

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-03-28 21:03:20
      1469
      0

    • 【MRS产品】【Hive元数据功能】如何使用JDBC的方式连接Hive元数据？

      【功能模块】【操作步骤&问题现象】1、用JAVA编写JDBC连接hive元数据，但是无法登录【截图信息】连接信息如下报错信息如下我尝试修改/srv/BigData/dbdata_service/data/pg_hba.conf，然后重启DBService之后，这个文件的变动又被改

      开发者  >  其他
      作者： jkc
      3646
      2

    • MRS Hive列统计信息

      Hive列统计信息 Hive的列统计信息记录了Hive表字段的元信息，根据字段类型的不同，统计的元信息也是稍有差异的。本文讲述两种常用的字段类型，int和string。int类型有4个统计信息，分别是：min、max、num_nulls、distinct_count；string类型也有4个统计信息，分别是：

      开发者  >  博客
      作者： fzhan
      发表时间： 2021-12-28 11:44:05
      1051
      0

    • MRS Hive 调优参考

      12.5 Hive12.5.1 建立表分区操作场景Hive在做Select查询时，一般会扫描整个表内容，会消耗较多时间去扫描不关注的数据。此时，可根据业务需求及其查询维度，建立合理的表分区，从而提高查询效率。操作步骤1.      使用PuTTY工具，以root用户登录已安装Hive客户端的节点。2

      开发者  >  其他
      作者： kevin_chen
      2583
      0

    • hive和hdfs

      创建外部表employeecreate table employee(user_id int,username string,dept_id int)row format delimited fields terminated by ','  stored as textfile

      开发者  >  博客
      作者： 没头脑
      发表时间： 2022-06-18 00:45:08
      247
      0

    • Hive 自定义函数 UDF

      /run/jar/udf_test.jar; c）创建临时函数：hive>CREATE TEMPORARY FUNCTION add_example AS 'hive.udf.Add'; d）销毁临时函数：hive> DROP TEMPORARY FUNCTION add_example;

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-03-27 15:40:27
      1523
      0

    • MRS集群Hive对接LDAP

         操作流程 在Hive->配置->全部配置->HiveServer->自定义hive-site.xml中添加如下配置项，并保存配置： hive.server2.authentication=LDAP hive.server2.authentication

      开发者  >  博客
      作者： IisAf1sh
      发表时间： 2021-01-06 03:35:47
      2229
      0

    • ApplyArchiveRule Apply Archive Rule - API

      Apply archive rule retroactively to archive existing findings that meet the archive rule criteria.接口URL: "/v5/analyzers/{analyzer_id}/archive-rul

      开发者 >  开发工具

    • Hive2.1.1与Hive2.3.3主要功能区别

      Valuehive.metastore.fshandler.thread20hive.metastore.fshandler.threads15hive.optimize.metadataonlytruehive.optimize.metadataonlyfalsehive.compute

      开发者  >  博客
      作者： 千载不变
      发表时间： 2020-10-30 15:02:58
      10535
      0

    • Hive on tez中map任务数的计算

      Hive on tez任务计算map任务是在AM中计算，而不是在hiveserver中计算，有别于hive on mr任务。 hive on tez中计算map任务个数主要分为两个步骤：一是计算splits个数；二是将splits分组，分组数即为map数量 1.​ 先通过HiveInputFormat

      开发者  >  博客
      作者： lihz
      发表时间： 2021-09-30 03:05:50
      2181
      0
    总条数： 10000
    点击加载更多