已找到以下 10000 条记录
  • 数据仓库分层:理解DWD、DWB和DWS含义

    和DWS是数据仓库三个重要层次,分别代数据仓库探索、构建和服务三个阶段。在构建数据仓库时,我们需要明确每个阶段目标和任务,以及每个阶段所需要数据源和数据模型。只有理解了这些缩写背后含义和任务,我们才能更好地理解和应用数据仓库知识和技术。在实际数据仓库项目中,这些

    作者: 炒香菇的书呆子
    708
    4
  • GaussDB(DWS)对象设计规范 - 数据仓库服务 GaussDB(DWS)

    GaussDB(DWS)对象设计规范 DATABASE对象设计规范 USER对象设计规范 SCHEMA对象设计规范 TABLESPACE对象设计规范 TABLE对象设计规范(重点) INDEX对象设计规范(重点) VIEW对象设计规范 父主题: GaussDB(DWS)开发设计规范

  • 华为云企业级数据仓库DWS

    越来越多企业希望能将数据分析能力从数据仓库扩展至”数据湖“,做更深层次数据分析,发掘更多规律和价值。  DWS强大特性Express应运而生。通过Express特性可以直接查询分析EB级OBS数据湖,而无需预先加载到DWS内部,从而帮助用户发掘数据湖“暗数据”价值。Express全面兼容SQL

    作者: Amber
    6208
    0
  • 标签设计原则和命名示例 - 标签管理服务 TMS

    标签设计原则和命名示例 标签设计原则 企业上云后,云上创建资源不断增加,有些大型企业资源数量达到十万、百万级别,一个账号内存在大量资源,企业需要进行分类管理。单纯通过人工进行资源分类,效率低下,操作困难,此时需要借助云上自动化平台化能力来解决。 华为云推荐您使用标签对资源

  • GaussDB(DWS)数据仓库:从数据库到MPP,再到大数据时代数据仓库【绽放吧!GaussDB(DWS)云原生数仓】

    未经授权访问和泄露风险。 请注意,这只是一个简单示例,实际使用可能需要更复杂加密方案和安全控制措施,以确保敏感数据完整性和安全性。 GaussDB(DWS)应用场景 数据仓库 GaussDB(DWS)作为一种高度可扩展数据仓库解决方案,可以存储和分析大规模结构化和

    作者: 皮牙子抓饭
    发表时间: 2023-11-16 10:08:42
    35
    0
  • 数据仓库服务 GaussDB(DWS)——快速创建DWS集群并导入数据(一)——创建集群

    说明: 您申请存储空间会有必要文件系统开销,这些开销包括索引节点,以及数据库运行必须空间。存储空间数值必须为100整倍数。 - 节点数量 选择集群节点个数。 支持节点数范围为3~32。 3 总容量(GB) 显示集群总容量。 各个规

    作者: 星敐
    发表时间: 2022-02-16 12:07:18
    975
    0
  • 流程设计 - 数据治理中心 DataArts Studio

    您可以将某个DataArts Studio实例数据架构已建立流程设计信息导出到Excel文件。导出后文件可用于导入。导出流程操作请参见导出流程。 下载流程模板参数如3所示,其中名称前带“*”参数为必填参数,名称前未带“*”参数为可选参数。一个流程需要填写一条记录。 3 流程导入参数说明

  • 新建数据标准 - 数据治理中心 DataArts Studio

    引用码 选择已创建并选择相应“码字段”,这样就可以将码字段和数据标准相关联。如果未创建码,请参见新建码进行创建。在“配置中心 > 功能配置”页面“模型设计业务流程步骤 > 创建质量作业”勾选情况下,当引用码数据标准被关系建模业务关联后,如果发布成功,系统将会在DataArts

  • 数据仓库架构:星型模型和雪花模型选择

    雪花模型是在星型模型基础上进行了维度规范化,将维度进一步分解为多个层次规范化。这样可以减少数据冗余,提高数据存储效率。以下是一个简单雪花模型示例: 事实:订单事实(与星型模型相同) 维度:日期维度(与星型模型相同) 维度:客户维度(与星型模型相同)

    作者: 皮牙子抓饭
    发表时间: 2023-06-07 09:27:31
    22
    0
  • 数据设计方法论

    模型建设是数据中台的重要部分,可以说数据成败在于模型建设好坏。模型分为我们常指数据仓库分析模型和我们一些通用算法模型。 分析模型 数据接入到数据仓库,我们需要对数据进行加工,按照我们规划业务域,对各个业务数据汇总聚合,形成我们数据模型。 这其中涉及到数据仓库建设,在这简单说下。

    作者: 数据社
    发表时间: 2022-09-24 20:15:16
    216
    0
  • 约束设计

    可以通过min/max稀疏索引实现事实快速过滤扫描。PCK选取遵循以下原则: 【关注】一张上只能建立一个PCK,一个PCK可以包含多列,但是一般不建议超过2列。 【建议】在查询简单达式过滤条件上创建PCK。这种过滤条件一般形如col op

  • HBase rowkey 设计原则

    以 rowkey设计是至关重要,关系到你应用层查询效率。 rowkey是以字典顺序排序,存储是字节码。 Rowkey设计原则 1.Rowkey唯一原则 必须在设计上保证其唯一性。由于在HBase数据存储是Key-Value形式,若HBase同一插入相同Rowke

    作者: 没头脑
    发表时间: 2022-06-17 23:16:18
    283
    0
  • 数据库、数据仓库、数据湖、湖仓一体分别是什么? - 数据仓库服务 GaussDB(DWS)

    据从多个异构数据源抽取出来,进行加工与集成,按照主题进行重组,最终进入数据仓库数据仓库主要用于支撑企业决策分析,所涉及数据操作主要是数据查询。因此数据仓库通过结构优化、存储方式优化等方式提高查询速度、降低开销。 1 数据仓库与数据库对比 维度 数据仓库 数据库 应用场景

  • GaussDB(DWS) SQL编写规则 - 数据仓库服务 GaussDB(DWS)

    DB(DWS)不保证非日志(unlogged table)数据安全性。 【建议】临时和非日志存储方式建议和基相同。当基为行存(列存)时,临时和非日志也推荐创建为行存(列存),可以避免行列混合关联带来高计算代价。 【建议】索引字段总长度不超过50字节。否则

  • 数据是如何存储到数据仓库服务

    能否讲解下数据是如何存储到数据仓库服务

    作者: 凌野
    46
    3
  • 数据仓库服务公有云计费介绍

      本文介绍数据仓库服务公有云计费模型、计费场景以及套餐包使用规则。     数据仓库服务当前仅使用按需计费模式,主要有四种产生费用场景 数据仓库节点,创建数据仓库虚拟机规格时产生费用,按照节点个数每个小时更新账单; 数据仓库裸机节点,创建数据仓库裸机规格时产生费用,话单产生逻辑同上;

    作者: 幺幺子
    发表时间: 2020-12-30 09:48:31
    7541
    0
  • 数据仓库和Hadoop大数据平台有什么差别?

    本帖最后由 yd_65688703 于 2017-11-15 17:18 编辑 <br /> 数据仓库和Hadoop大数据平台有什么差别?

    作者: 婠
    11506
    1
  • 七十八、Hive数据仓库实际操作(操作测试)

    Hive数据操作 Hive数据分为两种:内部和外部。 Hive创建内部时,会将数据移动到数据仓库指向路径;若创建外部,仅记录数据所在路径,不对数据位置做任何改变。在删除时候,内部元数据和数据会被一起删除,而外部只删除元数据,不删

    作者: 托马斯-酷涛
    发表时间: 2022-05-25 15:22:20
    375
    0
  • 一篇文章搞懂数据仓库:元数据分类、元数据管理

    ”数据”背后业务含义 主题定义:每段 ETL、背后归属业务主题。 业务描述:每段代码实现具体业务逻辑。 标准指标:类似于 BI 语义层、数仓一致性事实;将分析指标进行规范化。 标准维度:同标准指标,对分析各维度定义实现规范化、标准化。 不断进行维护且与业务方进行沟通确认。

    作者: 不吃西红柿
    发表时间: 2021-07-14 16:31:56
    4083
    0
  • GaussDB(DWS)开发设计规范 - 数据仓库服务 GaussDB(DWS)

    GaussDB(DWS)开发设计规范 GaussDB(DWS)总体开发设计规范 GaussDB(DWS)连接管理规范 GaussDB(DWS)对象设计规范 GaussDB(DWS) SQL开发规范 GaussDB(DWS)外功能开发规范 GaussDB(DWS)存储过程开发规范