内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 为什么要做数仓分层,不做行吗?

    DWS:根据ODS,增加一些维度信息,过滤一些异常数据。为DW提供来源明细数据,提供业务系统细节数据长期沉淀,为未来分析类需求扩展提供历史数据支撑。 DW:模型,根据DWS层数据,按各个业务需求,以某个维度ID进行粗粒度汇总聚合。此一般会根据数仓涉及业务发展或者主

    作者: 数据社
    发表时间: 2022-09-24 19:06:36
    146
    0
  • 数据仓库并发能力OLTP类数据库区别

    </align> 13985 <align=left>由于DWS/LibrA(注1)集群Coordinator Node是多活、对等,所以整个系统并发数随着CN增加可以不断增长。具体并发能力受限于实际场景:</align>•短事务:在平安城市某项目中,在混合负载场景下,测试过5000+并发,可以稳定运行。

    作者: 小仓
    16398
    2
  • 五十六、 白话讲解商业智能 BI、数据仓库 DW、数据挖掘 DM

    数据仓库DW(Data Warehouse) 。它可以说是 BI 这个房子地基,搭建好 DW 这个地基之后,才能进行分析使用,最后产生价值。数据仓库可以说是数据库升级概念. 和数据库并无明显差别都是通过数据库技术来存储数据数据仓库将原有的多个数据来源中数据进行汇

    作者: 毛利
    发表时间: 2021-07-14 22:04:16
    1733
    0
  • 面试,如何使用数据仓库

    by小AA 数据仓库知多少 首先,来了解一下数据仓库吧!数据仓库是一个面向主题、集成、相对稳定、反应历史变化数据集合。 我们来看这几个词: 面向主题,数据仓库会规划各种业务主题,所以我们需要理解各大主题范畴以及之间关系,这样就了解了数据仓库基本架构。集成,

    作者: 数据社
    发表时间: 2022-09-24 19:53:53
    134
    0
  • 数据仓库技术与Hive入门

    Warehouse,简称数仓、DW),是一个用于存储,分析,报告数据系统 数据仓库目的是构建面向分析集成化数据环境,分析结构为企业提供决策支持 数据仓库与数据库不同,数据仓库专注分析 数据仓库本身并不“生产”任何数据,其数据来源于不同外部系统 同时数据仓库自身不需要“消费”任何数据,其结果开放给各个外部应用使用

    作者: 北山啦
    发表时间: 2023-12-07 16:23:04
    7
    0
  • 通俗易懂讲数据仓库之【缓慢变化维】

    te、dw_end_date),为数据行生命周期 12月20日商品拉链表数据: 12月20日数据是全新数据导入到dwdw_start_date表示某一条数据生命周期起始时间,即数据从该时间开始有效(即生效日期) dw_end_date表示某一条数据生命周期

    作者: 大数据梦想家
    发表时间: 2021-09-28 14:46:24
    1542
    0
  • 2020-08-12:数据仓库是怎么分层

    福哥答案2020-08-12:知乎答案一般都是分 ODS -> DW -> APP:ODS(Operational Data Store)就是将各种数据源数据,经过清洗整理到这里这一。一般涉及各种ETL工具,我们用时sqoop。DW(Data WareHouse),数据仓库,指的是经过抽象,模块化数据,可以

    作者: 福大大架构师每日一题
    发表时间: 2020-08-19 11:21:43
    2788
    0
  • 云端数据仓库模式选型与建设

    于云厂商提供基础设施能力。方案4,则依靠云厂商数仓云能力。这也对云厂商产品选择,提出了更高要求。下文将就此展开说明。二、云端数据仓库2.1 云方案优势基于上面的说明,采用数据仓库云服务,具有较多优势,包括:更好性价比(无论是前期购买、还是后期运营)更快交付速度(最

    作者: feichaiyu
    发表时间: 2019-09-03 22:30:28
    6274
    0
  • 了解数据仓库

           数据仓库是信息(对其进行分析可做出更明智决策)中央存储库。通常,数据定期从事务系统、关系数据库其他来源流入数据仓库。业务分析师、数据工程师、数据科学家和决策者通过商业智能 (BI) 工具、SQL 客户端其他分析应用程序访问数据。       数据分析已然成为

    作者: 建赟
    1052
    2
  • 数据仓库平台ETL

    DWS)为代表MPPDB数据仓库平台,则多以ELT或是ETLT模式为主来构建ETL子系统。ETL子系统建设目的是将企业中分散、零乱、标准不统一异构数据源业务数据整合到一起,进行必要清洗转换,形成高质量统一数据模型,或者是便于用户查询,分析探索维度模型。借助专

    作者: 小强鼓掌
    25
    2
  • 数据仓库、数据平台和数据中台 ‖ 你分清了吗?

    5.png概念上区别:数据中台:企业级逻辑概念,体现企业 D2V(Data to Value)能力。数据仓库:一个相对具体功能概念,是存储管理一个或多个主题数据集合。数据平台:在大数据基础上出现融合了结构化非结构化数据数据基础平台。应用上区别:数据中台:距离业

    作者: 极客潇
    发表时间: 2020-11-13 16:19:23
    3034
    0
  • 使用 Hive 构建数据仓库

    Hadoop 领域数据仓库。Hadoop 似乎让出了最优秀营销公关代表地位,在一次简单对话之后,结果变成了是 Hive Hadoop 在拯救世界。这种描述很吸引人,也很有趣。但它是真的吗? 有几分相似。数据仓库构建一个真正数据仓库可能是一个庞大工程。有许多不同设备、方法和

    作者: sunnyman218
    发表时间: 2019-05-05 10:22:30
    8223
    0
  • 数据挖掘:数据仓库相关知识笔记

    &nbsp; 1、数据仓库介绍 数据仓库DW):可以满足管理人员决策分析需要,在数据库基础上产生了满足决策分析需要数据环境。 传统数据库和数据仓库比较 比较内容 传统数据库 数据仓库 数据内容 当前数据 历史、存档、归纳、计算 数据目标

    作者: IT技术分享社区
    发表时间: 2023-01-07 14:17:41
    119
    0
  • 漫谈数据仓库分层架构与演进

    集成表更多了。在公共明细汇总也出现了多个应用集市都在共用数据需求,会扩展补充到公共。并且随着时间变化,公共逻辑正确性公共性也需要在多个应用进入后整体考虑。 公共与应用关系: 通过上面两步演进,我们已经看到了公共与应用关系了,是一体。并不是各做各

    作者: 数据社
    发表时间: 2022-09-24 18:43:45
    193
    0
  • 数据库 vs 数据仓库

    Processing),支持复杂分析操作,侧重决策支持,并且提供直观易懂查询结果。 数据仓库汇总有可能有很多维度数据统计分析结果,取百家之长(各个数据源数据),成就自己一方天地(规划各种业务域模型,指标)。 举个栗子~ 车联网早期是肯定没有数据仓库,刚开始启动阶段就是

    作者: 数据社
    发表时间: 2022-09-24 18:43:05
    148
    0
  • 数据库 与 数据仓库

    数据库 与 数据仓库 数据库 1)用于OLTP 2)数据库是面向事物处理,数据是由日常业务产生,会有频繁增删改操作 3)数据库一般用来存储当前事务性数据,如交易数据、业务数据 4)数据库设计一般是符合三范式,有最大精确度最小冗余度,有利于数据操作 5)数据库

    作者: 云叔记
    发表时间: 2024-03-04 08:17:52
    172
    0
  • 【数据平台】【数据仓库】为什么园区方案使用gaussdb100作为数据仓库

    1、新版本cube方案中为什么使用gaussdb100 OLTP库作为数据仓库?怎么不继续使用早期私有云方案gaussdb 200 (好像现在叫gaussdb A)?2、Flink 为什么采用了边缘Flink形式,不用FusionInsight HD 安装flink?3、Datatool

    作者: 新昵称耶
    654
    2
  • DWS数据仓库服务

    数据仓库数据仓库服务(Data Warehouse Service,简称DWS)是一种基于云基础架构和平台在线数据处理数据库,提供即开即用、可扩展且完全托管分析型数据库服务。DWS是基于融合数据仓库GaussDB产品云原生服务,兼容标准ANSI SQL 99SQL 200

    作者: sangjunke
    754
    0
  • 数据仓库迁移方案

    用户权限管理与原Teradata权限管理形式基本一致。原Teradata库中权限设计中将每个库权限拆成四类权限组:表视图查询访问权限(查询)表视图增删改访问权限(IDU)创建对象、清空表、修改对象约束等权限(Tab)函数执行、序列访问等其他权限(其他)4、作业

    作者: Sprother
    1092
    2
  • hive数据仓库设计,项目中分了几层,都有什么

    hive数据仓库设计,项目中分了几层,都有什么 ODS: 是将OLTP数据通过ETL同步到数据仓库来作为数据仓库最基础数据来源。在这个过程中,数据经过了一定清洗,比如字段统一,脏数据去除等,但是数据粒度是不会变化ODS数据可以只保留一定时间。 DW : D

    作者: 百忍成金的虚竹
    发表时间: 2021-03-25 15:45:41
    2614
    0