已找到以下 10000 条记录
  • 数据仓库学习笔记

    连续文件,1个月+1个月  后续可以再继续追加一个月等。   同构:需要同步的两张表一模一样;异构:需要同步的两张表结构不一样。审计可以在数据仓库进行,但是不应该从中进行。   数据仓库的数据清理     1,数据加入到失去原有细节的一个轮转综合文件中     2,数据从高性能的介质(如DASD)转移到大容量介质上

    作者: 大数据小粉
    发表时间: 2017-04-26 09:39:41
    9294
    0
  • Python量化数据仓库搭建3:数据落库代码封装

    Python量化数据仓库搭建3:数据落库代码封装 本系列教程为量化开发者,提供本地量化金融数据仓库搭建教程与全套源代码。我们以恒有数(UDATA)金融数据社区为数据源,将金融基础数据落到本地数据库。教程提供全套源代码,包括历史数据下载与增量数据更新,数据更新任务部署与日常监控等操作。

    作者: hailang
    发表时间: 2021-10-27 09:35:52
    1007
    0
  • 面试,如何使用数据仓库

    by小AA 数据仓库知多少 首先,来了解一下数据仓库吧!数据仓库是一个面向主题的、集成的、相对稳定的、反应历史变化的数据集合。 我们来看这几个词: 面向主题,数据仓库会规划各种业务主题,所以我们需要理解各大主题的范畴以及之间的关系,这样就了解了数据仓库的基本架构。集成,

    作者: 数据社
    发表时间: 2022-09-24 19:53:53
    134
    0
  • 数据仓库的分层

    从数据源的采集到多层清洗加工的过程中,数据仓库的数据逻辑分层一般分为4层。 分层的核心思想就是解耦。 ODS Operation Data Store 原始数据层,也有叫贴源层,该层对采集的原始数据进行原样存储。 DWD Data Warehouse Detail 明细数据层,对ODS进行清洗,解决数据质量问题。

    作者: 黄生
    发表时间: 2024-06-27 10:35:16
    26
    0
  • 数据仓库设计规范(更新中)1024投稿

    于是数据仓库需要分层。 数据仓库分层的原因 1、用空间换时间,通过数据预处理提高效率,通过大量的预处理可以提升应用系统的用户体验(效率),但是数据仓库会存在大量冗余的数据. 2、增强可扩展性,方便以后业务的变更。如果不分层的话,当源业务系统的业务规则发生变化整个数据仓库需要重

    作者: 孙中明
    发表时间: 2022-01-22 14:25:01
    968
    0
  • 了解数据仓库

    得洞察力、监控企业绩效以及更明智地决策。数据仓库通过高效地存储数据以便最大限度地减少数据输入和输出 (I/O),并快速地同时向成千上万的用户提供查询结果,为这些报告、控制面板和分析工具 由数据仓库提供支持。             数据仓库服务(Data Warehouse Se

    作者: 建赟
    1052
    2
  • 一篇文章搞懂数据仓库数据仓库的8个发展阶段

    企业级数据仓库(EDW,1991)1991年,BillInmon出版了其有关数据仓库的第一本书,这本书不仅仅说明为什么要建数据仓库数据仓库能给你带来什么,更重要的是,Inmon第一次提供了如何建设数据仓库的指导性意见,该书定义了数据仓库非常具体的原则,包括:数据仓库是面向主题的(Subject-Oriente

    作者: 不吃西红柿
    发表时间: 2021-07-14 16:52:48
    3269
    0
  • 数据仓库专家服务

    案交流、联调与优化 服务内容 数据仓库咨询服务 理解客户业务需求,结合客户需求场景,提供华为云数据仓库产品及解决方案咨询服务 数据仓库规划设计与实施 提供华为云数据仓库软件组网规划、安装、配置与调测服务 数据仓库迁移服务 根据业务特点,设计数据仓库迁移方案,协助客户实施数仓平台迁

  • 使用 Hive 构建数据仓库

    中,我不得不使用 Hive 作为数据库、作为数据仓库以及作为缓慢变化的系统。这很有挑战性,但偶尔会令人生厌。有时,您不得不摇头并想知道为什么。但在一天结束时,您仍然需要让它工作。如果需要在 Hive 中构建和使用某个数据仓库,而且需要使用缓慢变化的维度和更新,并协调旧数据,那么您

    作者: sunnyman218
    发表时间: 2019-05-05 10:22:30
    8223
    0
  • 数据仓库迁移方案

    数据。数据以增量或全量形式进入数据仓库,表数量、脚本程序数量较大,缓冲层表是根据DDL每日根据数据加载程序自动生成“表名+数据日期”的数据表。主要工作包括:统计需要完成多少DDL、视图,函数,用户及权限的迁移等。主题层元数据迁移主题加工层是数据仓库的核心部分,采用三范式设计。当前

    作者: Sprother
    1090
    2
  • 数据仓库 - 自动驾驶云服务 Octopus

    数据仓库 表1 数据仓库权限 权限 对应API接口 授权项(Action) IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库列表 GET /v1.0/{project_id}/common/warehouses octopus:dataWarehouse:list

  • 数据仓库 - 自动驾驶云服务 Octopus

    数据仓库 获取数据仓库列表信息 获取数据仓库的数据列表 父主题: API

  • 数据仓库 - 专业服务

    数据仓库 华为云数据仓库高级工程师培训 父主题: 培训服务

  • 网站漏洞扫描一次需要多久? - 漏洞管理服务 CodeArts Inspector

    网站漏洞扫描一次需要多久? 网站漏洞扫描的时长,跟多种因素相关,包括网站规模(即自动爬取的页面数)、网站响应速度、页面复杂度、网络环境等,通常扫描时长为小时级别,最长不超过24小时。 测试环境下,200个页面的网站完成一次全量扫描耗时约1个小时,这里仅供参考,请以实际扫描时间为准。

  • 数据库 vs 数据仓库

    键)来查询用户都存储的什么信息。 数据仓库 数据仓库数据仓库系统的主要应用主要是OLAP(On-Line Analytical Processing),支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果。 数据仓库汇总有可能有很多维度数据的统计分析结果

    作者: 数据社
    发表时间: 2022-09-24 18:43:05
    148
    0
  • DWS数据仓库服务

    数据仓库数据仓库服务(Data Warehouse Service,简称DWS)是一种基于云基础架构和平台的在线数据处理数据库,提供即开即用、可扩展且完全托管的分析型数据库服务。DWS是基于融合数据仓库GaussDB产品的云原生服务,兼容标准ANSI SQL 99和SQL 200

    作者: sangjunke
    754
    0
  • 【数据平台】【数据仓库】为什么园区方案使用gaussdb100作为数据仓库

    1、新版本的cube方案中为什么使用gaussdb100 OLTP的库作为数据仓库?怎么不继续使用早期私有云方案的gaussdb 200 (好像现在叫gaussdb A)?2、Flink 为什么采用了边缘Flink的形式,不用FusionInsight HD 安装flink?3、Datatool

    作者: 新昵称耶
    653
    2
  • 数据库 与 数据仓库

    8)常见选型:MySQL、PostgreSQL、Oracle 数据仓库 1)用于OLAP 2)数据仓库是面向主题的,数据相对稳定,来源多样,经过ETL得到,用来分析,决策支撑 3)数据仓库一般存储的历史数据 4)数据仓库的设计一般不符合三范式,并且反规划范,有利于查询 5)数据仓库“通常”采用分布式架构,数据分散存储在多个服务器上,以列存居多

    作者: 云叔记
    发表时间: 2024-03-04 08:17:52
    172
    0
  • 数据仓库技术与Hive入门

    简称数仓、DW),是一个用于存储,分析,报告的数据系统 数据仓库的目的是构建面向分析的集成化数据环境,分析结构为企业提供决策支持 数据仓库与数据库不同,数据仓库专注分析 数据仓库本身并不“生产”任何数据,其数据来源于不同外部系统 同时数据仓库自身不需要“消费”任何数据,其结果开放给各个外部应用使用

    作者: 北山啦
    发表时间: 2023-12-07 16:23:04
    7
    0
  • 请问CodeArts Snap申请测试大概需要多久

    CodeArts Snap申请测试大概需要多久啊,从开年到现在都没有收到信息 

    作者: yd_227252276
    142
    7