已找到以下 10000 条记录

    • Hive MetaStore元数据库分析

      ore 服务即可。HiveMetaStore:是为Apache hive提供元数据的元数据服务，它属于Apache hive开源项目，目前已经可以作为Standalone提供服务，且不限于Hive，第三方服务也可以使用其作为元数据库服务。二：SchemaHive MetaStor

      开发者  >  博客
      作者： 云中台
      发表时间： 2020-10-31 18:16:33
      10207
      0

    • 数据仓库的好处

      系统数据需要通过ETL工具时隔数小时后同步到BI系统，无法做到实时分析，销售及运营主管无法实时掌握经营情况。为了解决这个问题，他们后来采用了华为云混合负载数据仓库DWS。DWS采用“一库两用”的设计理念，一套数据仓库集群既可以支持超高并发、低时延的业务交易请求，同时可支撑复杂的海

      开发者  >  其他
      作者： 小强鼓掌
      35
      6

    • 数据仓库入门浅谈

      务概念和业务流程。3）数据仓库的存储数据偏静态，但是使用过程是动态不固定的。并非用几个dashboard和KPI模板看固定的格式数据就是数据仓库。真正的价值在于业务分析和BI的数据推送结合，起到量化分析、有效支撑决策作用。4）数据仓库能实现而其他工具难以实现的几个特性：   快速

      开发者  >  博客
      作者： 大数据小粉
      发表时间： 2017-04-26 11:44:15
      9078
      0

    • Hive快速入门系列(7) | Hive常见的属性配置

        本次博主为大家带来的事Hive常见的属性配置。希望能够帮助大家。 目录 一. Hive数据仓库位置配置二. 查询后信息显示配置三. Hive运行日志信息配置四. 参数配置方式4.1 查看当前所有的配置信息4.2 参数的配置三种方式 一. Hive数据仓库位置配置   1. De

      开发者  >  博客
      作者： 不温卜火
      发表时间： 2020-12-02 22:55:05
      5303
      0

    • 大数据技术学习——Hive

      sp;  一句话介绍 Hive是基于HDFS的数据仓库，适合存储结构化或半结构化数据。 2       Hive功能定位 Hive本身不存储数据，数据都存储在HDFS上。Hive提供两个核心功能： 统一元数据

      开发者  >  博客
      作者： Eric Shi
      发表时间： 2023-02-25 09:58:40
      1642
      0

    • 临时转储数据仓库

      临时转储数据仓库

      开发者  >  博客
      作者： 慢慢学
      发表时间： 2021-02-25 16:04:10
      5434
      0

    • 【Hive基础增强】Hive数据导入与导出

      student; （2）加载HDFS文件到hive中 上传文件到HDFS hive (default)> dfs -put /opt/module/datas/student.txt /user/zkx/hive; 加载HDFS上数据 hive (default)> load

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-03-25 15:16:51
      3075
      0

    • 数据仓库平台ETL

      在数据仓库平台建设过程中，数据的加载、卸载，各层数据模型之间的数据流转，业务规则的实现等等数据加工过程都会以ETL任务的方式实现。 构建ETL子系统是数据仓库系统实施的一个非常重要的环节，在仓库平台建设过程中搭建一个完整、标准的ETL子系统是数据仓库平台建设的基础性目标之一。ET

      开发者  >  其他
      作者： 小强鼓掌
      25
      2

    • 数据仓库学习笔记

      关于数据环境：  数据仓库开发最好是以反复的方式进行。首先建立数据仓库的一部分，然后再建立另一部分。即出现所谓的CLDS的数据驱动的开发生命周期，区别于传统的需求驱动开发生命周期(SDLC)。   粒度的选择：   一般采用双重粒度或建立活样本数据库。   数据仓库中分区是在应用层而非系统层进行；

      开发者  >  博客
      作者： 大数据小粉
      发表时间： 2017-04-26 09:39:41
      9294
      0

    • 数据仓库的分层

      从数据源的采集到多层清洗加工的过程中，数据仓库的数据逻辑分层一般分为4层。 分层的核心思想就是解耦。 ODS Operation Data Store 原始数据层，也有叫贴源层，该层对采集的原始数据进行原样存储。 DWD Data Warehouse Detail 明细数据层，对ODS进行清洗，解决数据质量问题。

      开发者  >  博客
      作者： 黄生
      发表时间： 2024-06-27 10:35:16
      26
      0

    • Hive用户权限说明 - MapReduce服务 MRS

      访问权限策略。 Hive权限模型 使用Hive组件，必须对Hive数据库和表（含外表和视图）拥有相应的权限。在MRS中，完整的Hive权限模型由Hive元数据权限与HDFS文件权限组成。使用数据库或表时所需要的各种权限都是Hive权限模型中的一种。 Hive元数据权限。 与传统关

      帮助中心 > MapReduce服务 MRS > 组件操作指南（LTS版） > 使用Hive > Hive用户权限管理

    • 【hive基础增强】Hive参数配置及数据类型

      1．查看当前所有的配置信息 hive>set; 2．参数的配置三种方式 （1）配置文件方式 默认配置文件：hive-default.xml 用户自定义配置文件：hive-site.xml 注意：用户自定义配置会覆盖默认配置。另外，Hive也会读入Hadoop的配置，因为Hive是作为Had

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-03-27 16:05:07
      2153
      0

    • Hive JDBC接口介绍 - MapReduce服务 MRS

      Hive JDBC接口介绍 Hive JDBC接口遵循标准的JAVA JDBC驱动标准，详情请参见JDK1.7 API。 Hive作为数据仓库类型数据库，其并不能支持所有的JDBC标准API。 例如事务类型的操作：rollback、setAutoCommit等，执行该类操作会产生“Method

      帮助中心 > MapReduce服务 MRS > 开发指南（普通版_2.x） > Hive开发指南 > Hive应用开发常见问题

    • Hive简介

      当列很多或者数据量很大时，如果select *或者不指定分区，全列扫描和全表扫描效率都很低。 Hive中与列裁剪优化相关的配置项是hive.optimize.cp，与分区裁剪优化相关的则是hive.optimize.pruner，默认都是true。在HiveSQL解析阶段对应的则是ColumnPruner逻辑优化器。

      开发者  >  博客
      作者： xiatch
      发表时间： 2022-05-31 11:23:07
      671
      0

    • 为什么我们需要数据仓库

      gn> <b>数据仓库解决方案</b><align=left>上面的问题，都可以通过一个建设良好的数据仓库来解决。</align><align=left>业务数据库是面向操作的，主要服务于业务产品和开发。而数据仓库则是面向分析的，主要服务于我们分析人员。评价数据仓库做的好不好，就

      开发者  >  其他
      作者： J Lee
      17472
      10

    • 数据库-数据仓库-数据湖

      湖仓发展历程经过对数据湖和数据仓库的深入阐述和比较，数据湖和数据仓库作为大数据系统的两条不同演进路线，有各自特有的优势和局限性。数据湖和数据仓库一个面向初创用户友好，一个成长性更佳。对企业来说，数据湖和数据仓库是否必须是一个二选一的选择题？是否能有一种方案同时兼顾数据湖的灵活性和云数据仓库的成长性

      开发者  >  博客
      作者： Smy1121
      发表时间： 2023-01-03 03:14:29
      200
      0

    • Hive用户权限说明 - MapReduce服务 MRS

      操作可参考添加Hive的Ranger访问权限策略。 Hive权限模型 使用Hive组件，必须对Hive数据库和表（含外表和视图）拥有相应的权限。在MRS中，完整的Hive权限模型由Hive元数据权限与HDFS文件权限组成。使用数据库或表时所需要的各种权限都是Hive权限模型中的一种。

      帮助中心 > MapReduce服务 MRS > 组件操作指南（普通版） > 使用Hive > Hive用户权限管理

    • 数据如何存储到数据仓库服务？

      数据如何存储到数据仓库服务？

      开发者  >  其他
      作者： 木又林夕
      9242
      1

    • Hive对接OBS - 对象存储服务 OBS

      配置Hive。 重命名/opt/hive-2.3.3/conf/hive-env.sh.template为hive-env.sh。 重命名opt/hive-2.3.3/conf/hive-log4j2.properties.template为hive-log4j2.properties。

      帮助中心 > 对象存储服务 OBS > 最佳实践 > 大数据场景下使用OBS实现存算分离 > 对接大数据组件

    • 了解数据仓库

      得洞察力、监控企业绩效以及更明智地决策。数据仓库通过高效地存储数据以便最大限度地减少数据输入和输出 (I/O)，并快速地同时向成千上万的用户提供查询结果，为这些报告、控制面板和分析工具 由数据仓库提供支持。             数据仓库服务（Data Warehouse Se

      开发者  >  其他
      作者： 建赟
      1052
      2
    总条数： 10000
    点击加载更多