已找到以下 10000 条记录
  • 列存数据仓库怎样更高效

    面还可以做更高效。 ## 压缩 结构化数据编码方式一般都不会非常紧凑,常常还有一定可压缩余地。数据仓库通常会在列存基础上对数据进行压缩,在物理上减少数据存储量,从而减少读取时间,提高性能。数据相同字段数据类型一般都是一样,甚至有些情况取值都很接近,这样一批数据通常

    作者: baidaguo
    发表时间: 2022-10-20 01:30:45
    523
    0
  • TABLE对象设计规范(重点) - 数据仓库服务 GaussDB(DWS)

    、事实,无合适分布列。 Replication 全量数据在集群每一个DN实例上保留一份。 优点:每个DN上都有此全量数据,JOIN操作可以完全避免节点间数据通信,从而减小网络开销,同时减少了STREAM线程启停开销。 缺点:每个DN都保留了完整数据,数据的冗余,占用更多存储空间。

  • PB级数据仓库性能调优

    分布列数据批量入库时候,按字段做一些排序。排完序之后,再入库。导入数据和统计信息。Time:10.422ms不包含PCK大概花了23.902mspck建立场景和索引建立场景是有点像。nestloop在特定场景下,性能会非常好,比如小join大时候,hashjoi

    作者: bigdata张凯翔
    发表时间: 2020-09-06 18:06:29
    17282
    1
  • 是否支持批量创建数据仓库

    <align=left>是否支持批量创建数据仓库?</align>

    作者: 54mali
    7321
    1
  • 数据仓库数据模型以及ETL算法

    据模型现出来,在业务人员和技术人员之间搭建起来了一个沟通桥梁,所以在国外一些数据仓库文献,把数据模型称之为数据仓库心脏“The Heart of the DataWarehouse”数据模型设计好坏直接影响数据稳定性易用性访问效率存储容量维护成本二、数据仓库数据模型,数据分层和ETL程序2

    作者: 匿名用户群体
    6320
    4
  • 数据仓库数据模型以及ETL算法

    面对繁多上游业务系统而言,数据仓库一个重要任务就是进行数据清洗和集成,形成一个标准化规范化数据结构,为后续一致性数据分析提供可信数据基础。 另一方面数据仓库里面的数据要发挥价值就需要通过多种形式现,有用于了解企业生产状况固定报,有用于向管理层汇报KPI驾驶

    作者: babu1801
    2779
    7
  • 基于大数据平台数据仓库方案

    产价值融合数据仓库方案。依托华为硬件设备,包括泰山服务器、FusionInsight智能大数据平台、GaussDB分布式数据库,搭建长亮金融数据仓库产品。整体方案包括数据后台、数据台、数据应用、数据门户、数据资产管理、数据运维管理及数据开发管理。数据后台包括数据采集与集

    交付方式: License
  • INDEX对象设计规范(重点) - 数据仓库服务 GaussDB(DWS)

    INDEX对象设计规范(重点) 规则2.14 只创建必要索引,创建索引必须选择合适列和顺序 违反规范影响: 冗余索引浪费空间,索引多影响入库效率。 组合索引列顺序错误,影响查询效率。 最佳实践: 索引使用需兼顾以下条件: 索引列必须是常用于过滤条件或JOIN关联条件列。 索引列必须是DISTINCT值多的列。

  • 数据挖掘:数据仓库相关知识笔记

    、综合、分组导出数据。 数据是反映历史变化:主要现三个方面,数据仓库随时间变化不断增加新数据内容,定时获取OLTP数据库变化数据追加到数据仓库中去; 随时间变化不断删除旧数据内容;数据仓库包含大量综合数据会隔一段时间进行抽样处理等。 3、数据仓库模式 主要有星型模式、雪花模式、事实星型模式。

    作者: IT技术分享社区
    发表时间: 2023-01-07 14:17:41
    119
    0
  • 中国云数据仓库,双第一

    作伙伴发布了《金融数据仓库白皮书》,共同推进金融数据应用水平提升。 ▶持续创新,点亮产业智能美好未来 华为云GaussDB(DWS)十年技术沉淀,厚积薄发,已成为数据仓库佼佼者。下一阶段,华为云将持续打造行业领先一站式数据治理和AI行业应用方案,以丰富跨域业务场景和实践经

    作者: 华为云头条
    发表时间: 2023-08-18 18:07:12
    103
    0
  • 浅谈数据仓库基本架构

    数据仓库数据转换和流动都可以认为是ETL(抽取Extra, 转化Transfer, 装载Load)过程,ETL是数据仓库流水线,也可以认为是数据仓库血液,它维系着数据仓库数据新陈代谢,而数据仓库日常管理和维护工作大部分精力就是保持ETL正常和稳定。

    作者: J Lee
    8687
    4
  • GaussDB(DWS)约束设计规则 - 数据仓库服务 GaussDB(DWS)

    扫描。PCK选取遵循以下原则: 【关注】一张上只能建立一个PCK,一个PCK可以包含多列,但是一般不建议超过2列。 【建议】在查询简单达式过滤条件上创建PCK。这种过滤条件一般形如col op const,其中col为列名,op为操作符 =、>、>=、<=、<,const为常量值。

  • 解密华为数据仓库产品GaussDB(DWS)

    不需要部署数据仓库服务器,就可以在几分钟之内获得高性能、高可能企业级数据仓库集群。稳定可靠  ——  省事又省心DWS在高可靠基础设施上运行。DWS是分布式MPP数据仓库,是由多个节点组成集群数据仓库,所有的软件进程均有主备保证,数据存储节点数据均有主备保证,能够保证在任

    作者: 彩虹上的水瓶座
    发表时间: 2020-06-28 16:54:29
    14208
    0
  • GaussDB(DWS)约束设计规则 - 数据仓库服务 GaussDB(DWS)

    扫描。PCK选取遵循以下原则: 【关注】一张上只能建立一个PCK,一个PCK可以包含多列,但是一般不建议超过2列。 【建议】在查询简单达式过滤条件上创建PCK。这种过滤条件一般形如col op const,其中col为列名,op为操作符 =、>、>=、<=、<,const为常量值。

  • 【DWS产品】数据仓库使用求助

    在下新接触华为云,请问一下各位专家,我这边需求是现有传统OA,HR,ERP系统,这些系统数据库在华为云RDS上,我们想搭建数据仓库将各个系统数据抽到数据库仓库形成大,后面提供给BI进行数据查询和展示。。请问下我需要用到华为云哪些服务,购买哪些产品,哪些是必须,哪些是可选。。有没有实践案例可参考。谢谢

    作者: sulta
    7194
    6
  • 数据仓库可以存储多少业务数据?

    数据仓库可以存储多少业务数据?

    作者: 木又林夕
    10659
    3
  • 数据仓库双活模式-----转载

          对象注册功能通过路由及创建对象DDL语句,实现对象动态注册;通过命令行指令实现对象注册;适当增加对象索引、约束索引注册信息,用于扩展细粒度对象锁能力,提高数据仓库ETL SQL并发能力;*数据仓库环境下,只需要考虑到级双活能力,不建议实施字段级、记录级双活;vi

    作者: 小强鼓掌
    14
    5
  • GaussDB(DWS)总体开发设计规范 - 数据仓库服务 GaussDB(DWS)

    层面的设计与开发。 术语定义 规则:数据库设计与开发时必须遵守约定。 建议:数据库设计与开发时建议考虑约定。 说明:对规则/建议进行详细说明和解释。 总体开发设计规范 下是GaussDB(DWS)开发过程需遵循开发设计规范全集列,可以单击链接跳转到对应规则下了解详细说明。

  • 数据仓库批处理和即系查询区别

    优化这些查询,使这些查询效率很高。而即席查询是用户在使用时临时生产,无法人工预先优化这些查询,需要数据库内部实时自动优化,所以即席查询也是评估数据仓库一个重要指标。在一个数据仓库系统,即席查询使用越多,对数据仓库要求就越高,对数据模型对称性要求也越高。

    作者: 小仓
    9381
    2