内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 数据平台模型分层架构之DM Datamarket

    注的数据。数据集市将数据仓库中的数据按照不同业务需求进行组织和存储,面向分析和报告进行针对性设计。DM有几个特点个性化:面向不同业务需求定制开发,可复用性差。大宽表:面向查询的结果设计的报表,字段多。查询性能高:直接面向最终结果设计的报表,查询性能快。DM表设计原则面向业务应

    作者: 智慧园区刘师傅
    301
    0
  • 【数据平台】【数据仓库】为什么园区方案使用gaussdb100作为数据仓库

    1、新版本的cube方案中为什么使用gaussdb100 OLTP的库作为数据仓库?怎么不继续使用早期私有云方案的gaussdb 200 (好像现在叫gaussdb A)?2、Flink 为什么采用了边缘Flink的形式,不用FusionInsight HD 安装flink?3、Datatool

    作者: 新昵称耶
    653
    2
  • DWS数据仓库服务

    数据仓库数据仓库服务(Data Warehouse Service,简称DWS)是一种基于云基础架构和平台的在线数据处理数据库,提供即开即用、可扩展且完全托管的分析型数据库服务。DWS是基于融合数据仓库GaussDB产品的云原生服务,兼容标准ANSI SQL 99和SQL 200

    作者: sangjunke
    750
    0
  • 数据库 vs 数据仓库

    键)来查询用户都存储的什么信息。 数据仓库 数据仓库数据仓库系统的主要应用主要是OLAP(On-Line Analytical Processing),支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果。 数据仓库汇总有可能有很多维度数据的统计分析结果

    作者: 数据社
    发表时间: 2022-09-24 18:43:05
    148
    0
  • 数据库 与 数据仓库

    8)常见选型:MySQL、PostgreSQL、Oracle 数据仓库 1)用于OLAP 2)数据仓库是面向主题的,数据相对稳定,来源多样,经过ETL得到,用来分析,决策支撑 3)数据仓库一般存储的历史数据 4)数据仓库的设计一般不符合三范式,并且反规划范,有利于查询 5)数据仓库“通常”采用分布式架构,数据分散存储在多个服务器上,以列存居多

    作者: 云叔记
    发表时间: 2024-03-04 08:17:52
    172
    0
  • 数据仓库 、数据中心相关技术知识和生态相关了解

    数据仓库 、数据中心相关技术知识和生态相关了解 1、数据仓库 数仓 数仓的分层 1、ODS :Operation Data Store 原始数据 加载原始数据不做处理 2、DWD :Data Warehouse Detail

    作者: 简简单单Onlinezuozuo
    发表时间: 2022-05-19 16:26:58
    504
    0
  • 数据仓库迁移方案

    权限的迁移等。主题元数据迁移主题加工数据仓库的核心部分,采用三范式设计。当前银行数仓主要采用FS-LDM主题模型设计。主要工作包括:统计需要完成多少DDL、视图,函数,用户及权限的迁移等。汇总元数据迁移汇总又叫共性加工,通常分为明细加工、汇总加工;是对主题模型的轻

    作者: Sprother
    1081
    2
  • 数据仓库技术与Hive入门

    简称数仓、DW),是一个用于存储,分析,报告的数据系统 数据仓库的目的是构建面向分析的集成化数据环境,分析结构为企业提供决策支持 数据仓库与数据库不同,数据仓库专注分析 数据仓库本身并不“生产”任何数据,其数据来源于不同外部系统 同时数据仓库自身不需要“消费”任何数据,其结果开放给各个外部应用使用

    作者: 北山啦
    发表时间: 2023-12-07 16:23:04
    7
    0
  • 数据仓库服务 Go - SDK

    go get -u github.com/huaweicloud/huaweicloud-sdk-go-v3

  • 数据仓库服务 Python - SDK

    pip install huaweicloudsdkdws

  • 数据仓库服务 Java - SDK

    <dependency> <groupId>com.huaweicloud.sdk</groupId> <artifactId>huaweicloud-sdk-dws</artifactId> <version>3.1.9</version> </dependency>

  • 【DGC数据入湖】 DM对外提供数据指标准确性问题

    数据入湖,可以“设备实例表”为例,DM提供统计查询接口给到大屏。问题:ABC表昨日有5条数据,入湖后,DM对外提供统计接口查询共5条数据。今日ABC数据全部删除,也就是0条数据,那dwi没有数据入湖,按原来的业务逻辑,DM统计的dwr事实表,取得还是dwi上一批次号的数

    作者: yd_295578332
    36
    1
  • 数据仓库、数据平台和数据中台 ‖ 你分清了吗?

    据存储的概念被造出来,鱼龙混杂。今天我们先来说说数据仓库、数据平台和数据中台区别。1605255525339086995.png概念上的区别:数据中台:企业级的逻辑概念,体现企业 D2V(Data to Value)的能力。数据仓库:一个相对具体的功能概念,是存储和管理一个或多个

    作者: 极客潇
    发表时间: 2020-11-13 16:19:23
    3034
    0
  • 为什么我们需要数据仓库

    gn> <b>数据仓库解决方案</b><align=left>上面的问题,都可以通过一个建设良好的数据仓库来解决。</align><align=left>业务数据库是面向操作的,主要服务于业务产品和开发。而数据仓库则是面向分析的,主要服务于我们分析人员。评价数据仓库做的好不好,就

    作者: J Lee
    17470
    10
  • 一文入门数据仓库

    的核心;Data Presentation Layer:数据展示,主要目的在于提供报表数据;Metadata Layer:元数据,该用于描述数据仓库存储的数据;System Operations Layer:系统操作,该包括了数据仓库系统中操作的信息,比如ETL任务的

    作者: 沙漏
    1243
    0
  • 主流数据仓库引擎技术比较

    数据库引擎 比较项目SybaseIQOracle10GDB2Teradata是否专门为分析型应用设计是否否是是否支持多种硬件平台是是是,多数性能指标的获得是基于IBM平台否是否支持多种操作系统是是是否原始数据膨胀情况原始数据的10%~70%,数据压缩无性能下降原始数据100%~5

    作者: JeffreyHuang
    发表时间: 2020-02-24 17:16:20
    8274
    0
  • 列存数据仓库怎样更高效

    很多数据仓库产品都采用了列式存储。如果数据表的总列数很多而计算涉及的列很少,采用列存就只读取需要的列即可,能够减少硬盘访问量,提高性能。特别是数据量非常大时,硬盘扫描和读取的时间占比很大,这时候列存的优势会很明显。 那么,是不是只要用了列存就一定能做到性能最佳呢?我们来看看,列式存储在哪些方面还可以做的更高效。

    作者: baidaguo
    发表时间: 2022-10-20 01:30:45
    523
    0
  • 传统BI项目与数据仓库

    讲,它分为:展现,分析,集成服务和数据集市。我们所涉及的数据仓库其实更多的聚焦于分析,但是整个BI项目的核心之一。分析包括了对商业逻辑的数据建模,不仅要根据用户对可视化数据的展现要求,也要根据数据集市中数据分布、容量、业务种类多样性来综合设计。作为分析中,提供分析数据物

    作者: tony_sniper
    6754
    4
  • 数据仓库详细介绍(九.数据质量)流程与工具

    的数据准确性。 在线业务系统复杂多变,每次变更都会产生数据的变化。为保证数据质量,就需要考虑如何能将源端业务系统的变更,更高效地通知给数据仓库维护人员。 首先,我们可以从人员管理入手,制定流程规范,要求前端业务变更发版上线前必须通知下游下游数仓运维人员。 其次,我们可以使用

    作者: 数据社
    发表时间: 2022-09-24 16:55:30
    176
    0
  • 对比几个数据概念,数据仓库、数据集市、数据湖、数据中台分别是什么?到底有什么区别?都得做吗?

    经常看到有人问这个问题,数据玩家也看过很多解释,感觉都不够直观,这里,我尝试用一个大家都理解的例子来说明。 &nbsp; 什么是数据仓库? &nbsp; 大家都去宜家买过东西吧,还记得一楼的大仓库不,你如果看中了某个家具,想要自己去仓库提货,一般都会记下商品上的编码:

    作者: 格图洛书
    发表时间: 2021-11-18 15:57:24
    1124
    0