已找到以下 10000 条记录
  • 中国云数据仓库,双第一

    一致,实时业务不稳定的问题,实现营销数据实时接入、处理,复杂分析查询从10分钟级提高到秒级。 安全方面 2022年,华为云GaussDB(DWS)正式通过全球权威信息技术安全性评估标准CC EAL2+ALC_FLR.2级别认证,是目前中国唯一获得CC安全认证的数据仓库产品。

    作者: 华为云头条
    发表时间: 2023-08-18 18:07:12
    103
    0
  • 使用EXTERNAL SCHEMA跨集群访问HiveMetaStore元数据 - 数据仓库服务 GaussDB(DWS)

    SCHEMA跨集群访问HiveMetaStore元数据 GaussDB(DWS) 存算分离版本DWS 3.0数仓支持通过建立EXTERNAL SCHEMA实现远端访问MRS的Hive数据源(包括Hive对接HDFS和Hive对接OBS两种场景),本实践详细地介绍了跨集群访问HiveMetaStore数据的操作流程供您参考。

  • 数据仓库迁移方案

    项目背景比如:XX银行基于Teradata一体机构建的数据仓库,存在成本高、可替换性差、在线升级能力弱等问题,希望引入扩展性更强、具有成本竞争力、在线升级能力强的产品替代。1.2. 项目目标比如项目总体目标:替换的数据仓库产品能力要不低于现网Teradata的整体能力,而且要满

    作者: Sprother
    1095
    2
  • 从MRS Hive导入表数据到GaussDB(DWS)集群 - 数据仓库服务 GaussDB(DWS)

    切换到omm用户,并进入Hive客户端所在目录。 su - omm cd /opt/client 在Hive上创建存储类型为TEXTFILE的表product_info。 在/opt/client路径下,导入环境变量。 source bigdata_env 登录Hive客户端。 beeline

  • Hive基础05、Hive引入数据

    ​  点击并拖拽以移动点击并拖拽以移动​编辑 Hive基础05、Hive引入数据 前提 Hive表中的数据不能通过insert语句插入,而是load data语句进行加载,其中加载的数据来源主要包括: 1、本地文件系统加载数据 2、HDFS文件系统加载数据 load

    作者: 红目香薰
    发表时间: 2022-07-29 02:14:18
    190
    0
  • 安装和体验hive

    再次进入mysql容器,以hive账号的身份登录mysql: mysql -uhive -p 创建名为hive的数据库: CREATE DATABASE hive; 安装hivehive官网下载,地址是:http://mirror.bit.edu.cn/apache/hive/ ,选择合适的版本,如下图:

    作者: 程序员欣宸
    发表时间: 2022-11-01 00:26:59
    155
    0
  • 数据库 vs 数据仓库

    键)来查询用户都存储的什么信息。 数据仓库 数据仓库数据仓库系统的主要应用主要是OLAP(On-Line Analytical Processing),支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果。 数据仓库汇总有可能有很多维度数据的统计分析结果

    作者: 数据社
    发表时间: 2022-09-24 18:43:05
    148
    0
  • 数据仓库、数据平台和数据中台 ‖ 你分清了吗?

    快的服务,不仅限于分析型场景,也适用于交易型场景,强调共享和复用;数据仓库:支持管理决策分析,主要应用于BI;数据平台:除传统BI应用外,更多融入了和人工智能算法的交互和实现;价值上的区别:数据中台:建立在数据仓库和数据平台上,是加速企业从数据到业务价值过程的中间层。数据中台将数据生产为一个个数据

    作者: 极客潇
    发表时间: 2020-11-13 16:19:23
    3034
    0
  • ALM-16001 Hive数据仓库空间使用率超过阈值 - MapReduce服务 MRS

    ALM-16001 Hive数据仓库空间使用率超过阈值 告警解释 系统每30秒周期性检测Hive数据仓库空间使用率,该指标可在Hive服务监控界面查看,指标名称为“Hive已经使用的HDFS空间占可使用空间的百分比”。Hive数据仓库空间使用率指标默认提供一个阈值范围(85%),

  • 数据仓库双活模式-----转载

          访问路由能力客户端直接将中间件作为数据库登陆,保持原来登陆逻辑不变;中间件根据登陆用户及附加参数实现拒绝登陆、双系统登陆、或单系统登陆,实现写登陆、读登陆,实现受控方式登陆、或非受控方式登陆;即实现受控和非受控方式的系统读写;同时兼顾考虑异常路由选择或同步路由选择,满足最大化异常执行及少部分同步需求场景;ii

    作者: 小强鼓掌
    14
    5
  • 数据仓库服务 GaussDB(DWS)入门

    一键式创建GaussDB(DWS)集群,上传csv本地数据到云存储OBS桶,通过创建OBS外表实现数据导入并简单分析。 开始实验 大数据融合分析:访问MRS中的Hive数据源 创建数据仓库集群GaussDB(DWS),并导入MRS的Hive数据,实现跨集群进行大数据融合分析。 开始实验 零售业经营多维度分析 环

  • Hive常用配置参数 - MapReduce服务 MRS

    相应参数值,Hive常用参数如表1所示。 表1 Hive常用参数说明 参数名称 参数说明 默认值 hive.auto.convert.join Hive基于输入文件大小将普通join转为mapjoin的开关,取值范围为: true false 说明: 在使用Hive进行联表查询,

  • Hive对接OBS

    export PATH=$HIVE_HOME/bin:$PATH 配置Hive。 重命名/opt/hive-2.3.3/conf/hive-env.sh.template为hive-env.sh。 重命名opt/hive-2.3.3/conf/hive-log4j2

  • 实时查询 - 数据仓库服务 GaussDB(DWS)

    实时查询 进入实时查询页面 登录GaussDB(DWS) 管理控制台。 在“集群 > 专属集群”页面,找到需要查看监控的集群。 在指定集群所在行的“操作”列,单击“监控面板”,系统将显示数据库监控页面。 在左侧导航栏选择“监控 > 实时查询”,进入实时查询监控页面。 在实时查询监

  • 我眼中的Hive-你眼中的了?

    我眼中的hive Hive:由Facebook开发用于解决海量结构化日志的数据统计。 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL 查询功能。 Hive是构建在Hadoop之上的数据仓库平台。 Hive是一个SQL解析引擎

    作者: 风一样的美男子
    发表时间: 2022-12-18 04:17:31
    1400
    0
  • 数据仓库 - 专业服务

    数据仓库 华为云数据仓库高级工程师培训 父主题: 培训服务

  • Hive实现离线计算(HQL)

    在此感谢!!! 大数据业务分为两大:实时计算,离线计算 实时计算:实时对来到的数据进行及时计算 离线计算:对堆积已久的数据进行计算(MapReduce(效率低)、HiveHive提供了 一种类SQL的操作进行查询统计 Hive的底层:是基于MapReduce的引擎,会将

    作者: 芝士味的椒盐
    发表时间: 2022-04-23 02:43:11
    4765
    0
  • Hive 元数据更新

    Hive 元数据更新 在大数据领域中,Hive 是一个常用的数据仓库工具,用于管理和查询大规模数据集。在使用 Hive 进行数据分析和处理时,经常需要更新元数据以确保数据的准确性和一致性。本文将介绍如何Hive 中进行元数据更新的相关操作。 什么是 Hive 元数据 在 Hive

    作者: 皮牙子抓饭
    发表时间: 2024-08-15 20:56:36
    74
    0
  • 如何Hive表大小数据进行监控 - MapReduce服务 MRS

    如何Hive表大小数据进行监控 问题 如何Hive中的表大小数据进行监控? 回答 当用户要对Hive表大小数据进行监控时,可以通过HDFS的精细化监控对指定表目录进行监控,从而到达监控指定表大小数据的目的。 前提条件 Hive、HDFS组件功能正常 HDFS精细化监控功能正常

  • 数据仓库 - 自动驾驶云服务 Octopus

    数据仓库 表1 数据仓库权限 权限 对应API接口 授权项(Action) IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list