数据湖
云数据仓库数据湖分析
数据湖 分析 整合数据资源,构建 大数据 平台,发现数据价值,成为企业经营的新趋势和迫切诉求。DWS Express可直接对存储在 对象存储OBS 上的大数据平台集成、处理后的数据进行分析 优势 统一分析入口 以DWS的SQL作为上层应用的统一入口,应用开发人员使用熟悉的SQL语言即可访问所有数据 实时交互式分析 针对即时的分析需求,分析人员通过DWS Express,可实时从大数据平台中获取信息 弹性伸缩 客户可使用DWS Express提供的由成百上千节点组成的加速集群,相比本地托管集群,效率提升数百倍。 建议搭配使用: 数据湖探索 DLI、 MapReduce服务 、数据湖治理中心 DGC
云数据仓库传统数仓替换
传统数仓替换 传统 数据库 或数仓产品面临数据存不下、查不出、扩容难、成本高的痛点。GaussDB(DWS)作为新一代全场景 数据仓库 ,具备极致性能、高扩展、极简易用、一站式分析等特性,满足大数据时代企业构建新型数仓的需求。 优势 平滑 迁移 提供配套的迁移工具,可支持Teradata、Oracle/Exadata、Greenplum等数据分析系统的平滑迁移 完备的数据库及SQL能力 支持SQL 2003标准,兼容Oracle/Teradata的部分语法和数据结构,支持全局事务、存储过程、数据强一致性保证 库仓一体 逻辑集群,支持一套集群容纳 数据集 市、数据仓库 建议搭配使用: 数据接入服务 DIS、 云数据迁移 CDM 、数据湖治理中心 DGC
湖仓构建数据湖建设和持续运营
场景描述 数据湖建设和持续运营,是指数据湖的初始化建设及后续日常的海量元数据及权限管理,因此客户需要便捷高效的建设和管理方式。 传统方式的弊端 · 仅支持通过计算引擎(Hive、Spark等)执行SQL实现元数据的定义、修改、查询,对客户有一定的技能要求,缺少提升易用性的可视化界面。 · 一个完整的授权活动,需要针对计算引擎、 对象存储 执行两次授权操作,对客户操作带来不便,易用性差。 服务优势 · 站式可视化数据湖构建:提供数据湖元数据统一定义和授权的可视化界面,支持客户便捷操作,快速构建。 · 联动授权:支持在元数据授权的同时, 自动化 完成元数据所映射的文件目录的授权,使客户授权操作更便捷和高效。 · 细粒度访问控制:实现针对数据湖的库、表、列级元数据的细粒度访问控制,为业务数据的安全性提供有力保障。 建议搭配服务:MapReduce服务、数据湖探索 DLI、云数据仓库 GaussDB、 数据治理中心 DataArts Studio、 AI开发平台 ModelArts
云数据仓库一站式BI解决方案
一站式BI 解决方案 企业积累的海量数据及各种数据资产,体量庞大,需高性能大数据平台支撑进行全量数据分析和挖掘。依托DWS+BI工具打造全局的、直观的、关联性的、可视化的运营 数字化 分析平台 ,以数据分析来驱动业务价值提升及管理提升 优势 多源数据接入 多源数据采集,打破数据孤岛,形成统一的数据展现平台 统一分析决策平台 统一的数据决策平台,多维分析企业经营数据,有效支撑企业的经营决策; 多场景展现 搭配BI工具多终端数据展现PC端/移动端/大屏,满足业务部门各种报表诉求。 建议搭配使用:云 数据迁移 CDM、数据湖治理中心 DGC、BI/报表软件
湖仓构建功能描述
实例类别 LakeFormation提供了共享、独享实例类别,满足不同场景下客户对性能和成本的不同诉求。 共享型侧重对成本、性价比要求较高的场景,适合中轻载企业应用;独享型对性能、稳定性要求高的场景,适合重载企业应用。 实例管理 LakeFormation提供实例的创建、总览、删除等基本功能,帮助您便捷的进行实例管理,加速实现数据湖承载的业务的规划和部署。 元 数据管理 LakeFormation提供数据湖元数据Catalog、Database、Table的创建、修改、删除、查看等生命周期管理的功能。帮助您便捷的进行数据湖初始化构建以及持续运营,集中式的统一管理LakeFormation实例下所有的元数据,加速实现数据湖承载的业务的规划和部署。 数据权限管理 LakeFormation提供针对Catalog、Database、Table等数据资源的授权、取消、查看等功能。帮助您对数据湖实现便捷的统一的数据权限管理。
湖仓构建产品优势
生态开放 遵循 开源 事实标准,支撑存量业务平滑演进 —提供兼容Hive/Spark/Flink/Trino社区的元数据接口,支持华为计算引擎和开源引擎的无缝对接 —提供兼容Ranger的权限接口,一次授权,统一生效 —提供迁移工具,支持存量集群相关元数据的平滑迁移 数智融合 打通大数据和AI的数据壁垒,实现真正数智融合 —支持数据库、表、UDF、AI模型、非结构化数据集等统一管理 —实现统一的细粒度数据权限管理,支持跨用户/跨租户的数据共享 大规格高可靠 支撑超大规模大数据业务的高可靠 —超大规模元数据管理能力 —统一权限管理能力,突破 IAM 细粒度权限瓶颈 —支持多AZ、多实例的容灾能力 简单易用 提供基于元数据的增值管理能力 —Serverless架构,开箱即用 —提供数据湖管理、元数据统计等管理能力