已找到以下 10000 条记录
  • Hadoop数据仓库之数据治理

    访问日志)安全审计制定详细的规则。为数据的合规使用制定规范,必须在合规范围内安全使用数据。3. 参考资料《大数据之路》《hadoop构建数据仓库

    作者: 旧时光里的温柔
    1276
    2
  • 数据挖掘:数据仓库相关知识笔记

    数据是反映历史变化的:主要表现三个方面,数据仓库随时间变化不断增加新的数据内容,定时获取OLTP数据库中变化的数据追加到数据仓库中去; 随时间变化不断删除旧的数据内容;数据仓库中包含大量综合数据会隔一段时间进行抽样处理等。 3、数据仓库的模式 主要有星型模式、雪花模式、事实星型模式。 4、数据仓库的体系结构

    作者: IT技术分享社区
    发表时间: 2023-01-07 14:17:41
    119
    0
  • 数据库和数据仓库的差别

    索引等信息。广义上讲,在数据仓库中,元数据描述了数据仓库内数据的结构和建立方法的数据。 元数据是数据仓库管理系统的重要组成部分,元数据管理器是企业级数据仓库中的关键组件,贯穿数据仓库构建的整个过程,直接影响着数据仓库的构建、使用和维护。(1)构建数据仓库的主要步骤之一是ETL。这

    作者: 技术火炬手
    发表时间: 2017-10-11 16:43:40
    8594
    1
  • 解密华为数据仓库产品GaussDB(DWS)

    从低规格的数据仓库实例起步,以后随时根据业务情况弹性伸缩所需资源,按需开支。DWS让您能够轻松完成从项目概念到生产部署的整个过程。通过使用 DWS Console,您不需要安装数据仓库软件,也不需要部署数据仓库服务器,就可以在几分钟之内获得高性能、高可能的企业级数据仓库集群。稳定可靠 

    作者: 彩虹上的水瓶座
    发表时间: 2020-06-28 16:54:29
    14208
    0
  • 数据仓库专家服务

    案交流、联调与优化 服务内容 数据仓库咨询服务 理解客户业务需求,结合客户需求场景,提供华为云数据仓库产品及解决方案咨询服务 数据仓库规划设计与实施 提供华为云数据仓库软件组网规划、安装、配置与调测服务 数据仓库迁移服务 根据业务特点,设计数据仓库迁移方案,协助客户实施数仓平台迁

  • 了解数据仓库的产品优势

    景。DWS与传统数据仓库相比,主要有以下特点与显著优势,可解决多行业超大规模数据处理与通用平台管理问题:易使用1、一站式可视化便捷管理:DWS让您能够轻松完成从项目概念到生产部署的整个过程。通过使用DWS管理控制台,您不需要安装数据仓库软件,也不需要部署数据仓库服务器,就可以在几

    作者: 建赟
    1034
    2
  • Hive分布式数据仓库(1)

           Hive 是基于Hadoop构建的一套数据仓库分析系统,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapRe

    作者: 胡辣汤
    1371
    0
  • 数据仓库适用场景讲解------转载

    a) “数据同步模式” – 日志同步技术适用数据变化量小、数据传输压力小的数据场景,通常只适用于小型数据仓库平台;对于规模小的平台,RPO、RTO可以接近0;b) “数据同步模式” – 备份增量同步技术适合大数据量同步场景,实现方式容易被用户理解;往往需要数据库备份工具具备增量备

    作者: 小强鼓掌
    21
    5
  • 浅谈数据仓库的基本架构

    的过程,可以分为三——源数据、数据仓库、数据应用:    从图中可以看出数据仓库的数据来源于不同的源数据,并提供多样的数据应用,数据自上而下流入数据仓库后向上层开放应用,而数据仓库只是中间集成化数据管理的一个平台。    数据仓库从各数据源获取数据及在数据仓库内的数据转换和流动都可以认为是ETL(抽取Extra

    作者: J Lee
    8685
    4
  • Hive分布式数据仓库(2)

    在Hive流行之前,企业大多采用传统的并行数据仓库架构。传统的数据仓库一般采用国外知名厂商的大型服务器和成熟的解决方案,不仅价格昂贵且可拓展性较差,而且平台工具与其他厂商难以适配,用户操作体验也比较差、开发效率不高,当数据量达到TB级别后基本无法得到很好的性能。而且,传统数据仓库基本只擅长处理结构化或

    作者: 胡辣汤
    1167
    0
  • 数据仓库使用哪些安全防护?

    <align=left>如题:数据仓库使用哪些安全防护?</align>

    作者: chanhut
    8131
    1
  • 数据仓库8种ETL算法汇总

    ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,是构建数据仓库的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的数据仓库模型,将数据加载到数据仓库中。目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据。1

    作者: wzhyalfa
    1919
    1
  • 华为云数据仓库第5天——云上数据流动

    华为云账号的AK/SK填写完成后,点击“测试”, 如果测试成功,点击保存。3. 配置目的端DWS连接。 点击“新建连接”, 选择数据仓库中的“数据仓库服务数据库名称这里我们填写上一节创建的dota,填写完成后,点击“测试”, 如果测试成功,点击保存。4.在本文中,我们将obs中的ablibity_ids

    作者: tengyun
    发表时间: 2019-05-11 00:54:52
    12149
    0
  • 云端数据仓库的模式选型与建设

    的数据应用之一,数据仓库在企业内部扮演着重要的角色,构建并正确配置好数据仓库,对于数据分析工作至关重要。一个设计良好的数据仓库,可以让数据分析师们如鱼得水;否则可能使企业陷入无休止的问题之中,并在未来的企业竞争中处于劣势。随着越来越多的基础设施往云端迁移,数据仓库是否也需要上云?

    作者: feichaiyu
    发表时间: 2019-09-03 22:30:28
    6274
    0
  • Snowflake:数据仓库的终极形态?

    nowflake三核心架构1、存储(Storage)    存储目前支持AWS S3和Azure Blob,相信Google Storage在可期的未来也会兼容。所有数据在存储被全部加密以及columnar压缩,最大限度的优化存储效率。理论上讲,存储可以在无关计算资源的

    作者: 大数据小白条
    1826
    0
  • 漫谈数据仓库的分层架构与演进

    公共与应用关系: 通过上面两步演进,我们已经看到了公共与应用的关系了,是一体的。并不是各做各的,而是一件事情从专业化分工上做了切分。公共与应用只有一个共同目标,就是为满足业务需求而做数据加工。不同侧重的是应用只需要关注自己部门的最终业务目标,公共则需要从企业级的全局一致性、资源经济性上全盘考虑。

    作者: 数据社
    发表时间: 2022-09-24 18:43:45
    193
    0
  • 数据仓库,数据脱敏、and,or,in处置方案

    数据脱敏函数,是否可根据不同用户查询条件,对行脱敏、行滤除,也是这些脱敏函数么?and,or,in我们在用户查询时会用到,多条件间冲突时,是如何处置,是否有相应处置方案,目前我们也不知哪种处置比较好。

    作者: 发问小达人
    4598
    3
  • 【DWS产品】数据仓库的使用求助

    在下新接触华为云,请问一下各位专家,我这边的需求是现有传统的OA,HR,ERP系统,这些系统的数据库在华为云RDS上,我们想搭建数据仓库将各个系统的数据抽到数据库仓库形成大宽表,后面提供给BI进行数据查询和展示。。请问下我需要用到华为云的哪些服务,购买哪些产品,哪些是必须的,哪些是可选的。。有没有实践案例可参考。谢谢

    作者: sulta
    7194
    6
  • 图解数据仓库服务_数据仓库服务 GaussDB(DWS)_产品介绍_华为云

    图不是很美观,没有界面好看,页面链接:https://support.huaweicloud.com/productdesc-dws/dws_01_1110.html

    作者: 泽宇-Li
    16
    0
  • PB级数据仓库性能调优

    答:数据库性能瓶颈在具体数据处理业务场景,分布式架构场景下,业务CPU吃满了,瓶颈在CPU,内存吃满了,瓶颈在内存。采集于华云数据仓库GaussDB DWS_数据仓库性能调优-version 5.0-华哥

    作者: bigdata张凯翔
    发表时间: 2020-09-06 18:06:29
    17282
    1