已找到以下 10000 条记录
  • 数据仓库好处

    了华为云混合负载数据仓库DWS。DWS采用“一库两用”设计理念,一套数据仓库集群既可以支持超高并发、低时延业务交易请求,同时可支撑复杂海量数据分析和BI应用,减少开发和运维成本。相比于原系统,BI系统时效性大大提高,且数据分析性能提升3倍。做到数据实时一致同时,DWS也确

    作者: 小强鼓掌
    26
    6
  • 设计原则 - 智能制造

    个区域制造企业,这是平台建设遵循重要原则。 中试中心采用开放可扩展建设技术路线,大量采用模块化、开放性好、自主性强单元技术,以创新性工业互联网技术融合应用为导向,遵循分层解耦原则设计平台总体架构。采用“模块化可重构+数字孪生”技术路线,兼顾新技术、新标准技术,

  • 什么是数据仓库

    Processing),支持复杂分析操作,侧重决策支持,并且提供直观易懂查询结果。 数据仓库汇总有可能有很多维度数据统计分析结果,取百家之长(各个数据源数据),成就自己一方天地(规划各种业务域模型,指标)。 举个栗子~ 车联网早期是肯定没有数据仓库,刚开始启动阶段就是

    作者: 数据社
    发表时间: 2022-09-24 18:08:33
    148
    0
  • 设计原则 - 云架构中心

    设计原则 以下是常用性能优化指导原则: 中心化原则:识别支配性工作量负载功能,并使其处理过程最小化,把注意力集中在对性能影响最大部分进行提升。 本地化原则:选择靠近活动、功能和结果资源;避免通过间接方式去达到目的,导致通信量或者处理量大辐增加,性能大辐下降。 共享资源:

  • 数据仓库入门浅谈

    数据仓库是商业智能(业务智能、BI)基础。概念看起来简单,把数据存在静态仓库里头以便多个维度分析,但实现和应用较复杂困难。几个值得注意要点:1)数据仓库跟业务执行系统管理要点完全不同。按事实和维度存储,减少执行流程和执行角色干扰2)数据仓库要基于精准业务需要来建立,系

    作者: 大数据小粉
    发表时间: 2017-04-26 11:44:15
    9078
    0
  • 设计

    使数据处理本地化,提高集群性能和可支持并发度。通过对关联条件和分组条件仔细设计,能够尽可能减少不必要数据shuffle。 选择存储方案 【建议】存储类型是定义设计第一步,客户业务类型是决定存储类型主要因素,存储类型的选择依据请参考表1。

  • 设计原则 - 云架构中心

    安全设计原则: 零信任原则(Zero Trust) 零信任遵循“永不信任,始终验证”安全理念,假设任何人或程序都不可信,无论是内部用户、外部用户还是网络设备。系统内组件进行任何通信之前都将通过显式验证,减少系统信任带来攻击面。零信任把现有的基于实体鉴别和默认授权静态

  • 设计原则 - 云架构中心

    设计原则 组织,流程和成本管理相匹配 在成本优化过程,一个很重要原则是需要将组织结构,流程和成本管理相匹配。需要建立“责权分明”体系,否则即使用再好成本优化工具,也无法将成本优化落到实处。 流程上,需要把成本管理作为各个上云流程必备一环; 组织上,需要投入适当时间,资源和人力用于建立云财务管理的能力。

  • 调优前:学习结构设计 - 数据仓库服务 GaussDB(DWS)

    统性能,以便比较不同设计加载性能、存储空间和查询性能影响。 在进行调优实践之前,需要先了解结构设计相关内容。因为进行数据库设计时,设计一些关键项将严重影响后续整库查询性能。设计对数据存储也有影响:好设计能够减少I/O操作及最小化内存使用,进而提升查询性能。

  • 设计原则 - 云架构中心

    试,部署开发周期较小,使用频繁小型迭代进行。一个典型实践是使用微服务和CI/CD实践,微服务架构是一种更为灵活、可扩展和易于维护架构风格,已经逐渐成为现代应用开发主流选择。它通过将应用程序拆分为小、自治服务,每个服务都负责执行特定业务功能,可以使用不同技术栈,由

  • 数据仓库迁移方案

    多原dbc系统,为了减小业务脚本改动量,我们保留该Schema)。3、 用户及权限管理用户权限设计应该与原设计基本相同,数据库用户权限管理与原Teradata权限管理形式基本一致。原Teradata库权限设计中将每个库权限拆成四类权限组:和视图查询访问权限

    作者: Sprother
    1090
    2
  • ClickHouse设计原则 - MapReduce服务 MRS

    ClickHouse设计原则 设计原则 由于ClickHouse查询性能较优,且当前ClickHouse可支持上万列横向扩展。 在大部分场景下,有大join以及多join场景,且多个join数据变化更新频率较低,这种情况,建议对多个join查询逻辑

  • 临时转储数据仓库

    临时转储数据仓库

    作者: 慢慢学
    发表时间: 2021-02-25 16:04:10
    5434
    0
  • 数据仓库学习笔记

    关于数据环境:  数据仓库开发最好是以反复方式进行。首先建立数据仓库一部分,然后再建立另一部分。即出现所谓CLDS数据驱动开发生命周期,区别于传统需求驱动开发生命周期(SDLC)。   粒度选择:   一般采用双重粒度或建立活样本数据库。   数据仓库中分区是在应用层而非系统层进行;

    作者: 大数据小粉
    发表时间: 2017-04-26 09:39:41
    9294
    0
  • 使用 Hive 构建数据仓库

    之上的数据仓库基础架构。这是一种部分真实述(因为您可将源数据转换为星形模式),但在创建事实和维度时,它更关乎设计而不是技术。尽管如此,Hive 并不真正是一个数据仓库。它甚至并不真正是一个数据库。您可以使用 Hive 构建和设计一个数据仓库,也可以使用 Hive 构建和设计数据库,但存在一些限制需

    作者: sunnyman218
    发表时间: 2019-05-05 10:22:30
    8223
    0
  • 面试,如何使用数据仓库

    by小AA 数据仓库知多少 首先,来了解一下数据仓库吧!数据仓库是一个面向主题、集成、相对稳定、反应历史变化数据集合。 我们来看这几个词: 面向主题,数据仓库会规划各种业务主题,所以我们需要理解各大主题范畴以及之间关系,这样就了解了数据仓库基本架构。集成,

    作者: 数据社
    发表时间: 2022-09-24 19:53:53
    134
    0
  • 了解数据仓库

     数据和分析已然成为各大企业保持竞争力所不可或缺部分。企业用户依靠报告、控制面板和分析工具从其数据获得洞察力、监控企业绩效以及更明智地决策。数据仓库通过高效地存储数据以便最大限度地减少数据输入和输出 (I/O),并快速地同时向成千上万用户提供查询结果,为这些报告、控制面板和分析工具 由数据仓库提供支持。   

    作者: 建赟
    1052
    2
  • 数据仓库平台ETL

    数据仓库平台建设过程,数据加载、卸载,各层数据模型之间数据流转,业务规则实现等等数据加工过程都会以ETL任务方式实现。 构建ETL子系统是数据仓库系统实施一个非常重要环节,在仓库平台建设过程搭建一个完整、标准ETL子系统是数据仓库平台建设基础性目标之一。ET

    作者: 小强鼓掌
    21
    2
  • 数据仓库服务GaussDB(DWS)学习与资源_数据仓库培训课程_数据仓库视频教程

    GaussDB(DWS)性能调优 基于数据库中常见性能问题,通过调优手段解决性能瓶颈,提升SQL执行效率。 立即体验 使用Java语言开发数据仓库应用 展示如何使用Java语言对数据仓库进行二次开发,将数仓功能嵌入您应用。 立即体验 数据仓库服务GaussDB(DWS)权限管理 帮助您了解用户和

  • 数据库 与 数据仓库

    数据库 与 数据仓库 数据库 1)用于OLTP 2)数据库是面向事物处理,数据是由日常业务产生,会有频繁增删改操作 3)数据库一般用来存储当前事务性数据,如交易数据、业务数据 4)数据库设计一般是符合三范式,有最大精确度和最小冗余度,有利于数据操作 5)数据库

    作者: 云叔记
    发表时间: 2024-03-04 08:17:52
    172
    0