企业构建大数据分析架构遇到的难题
华为云流批一体解决方案给企业带来的价值
-
批、流、交互式一体化
统一元数据,无需移动,一份数据支持多种应用,内置多模计算能力,一份资源支持多种计算,提高资源利用率
-
一站式开发治理
DGC平台可完成数据全生命周期的开发治理工作,较传统数据治理效率提升7倍以上
-
更高性能更低成本
EB级离线计算、秒级分析,可根据业务峰值弹性扩缩容,采用存算分离架构,整体成本下降50%
华为云产品服务
数据湖探索 DLI
产品介绍:数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、HetuEngine(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。100%兼容开源生态的Serverless多模计算服务。
产品优势:
1.All in SQL:标准SQL,会SQL就会大数据分析;
2.Kubernetes生态:支持运行Kubernetes生态的用户自定义镜像,便于满足业务多样性诉求;
3.存算分离:存储和计算解耦,分开申请和计费,降低成本的同时,提高资源利用率;
元数据共享,统一视图,一份数据支持多种计算;
4.自动扩缩容:根据业务负载,对计算资源进行预估和自动扩缩容;
5.按量计费:真正的按使用量(扫描量/CU时)计费,不运行作业时“0”费用;
6.免运维、高可用:用户无需感知底层运维、升级、跨AZ高可用,跨AZ双活。
数据湖治理中心 DGC
产品介绍:数据湖治理中心 DGC提供一站式数据管理能力,帮助企业快速构建从数据接入到数据分析、资产化的端到端智能数据运营平台;基于华为数据治理方法论,帮助企业统一数据标准,构建全域大数据资产,加快数据变现,实现数字化转型。
产品优势:
1.一站式数据运营平台:帮助企业构建完整数据中台解决方案;
2. 提供垂直行业可复用的领域知识库:涵盖数据标准、领域模型、数据主题库、算法库和指标库;
3.丰富的数据开发类型:支持多人在线协作开发,供丰富的调度配置策略与海量的作业调度能力;
4.全链路数据治理管控:数据全生命周期管控;
5.统一数据资产管理:从业务视角管理和查看数据,定义业务架构、业务分类和业务术语,统一管理资产访问权限;
6.统一数据安全管理:数据全生命周期的安全管控,提供事前,事中,事后数据安全管理能力。
客户案例
-
点触科技基于华为云智能数据湖平台DLI + DGC,建立了游戏数据分析平台,对游戏的营收、玩家的留存率、付费率等指标进行实时分析帮助运营人员进行活动策划,助力发行人员进行精准投放,支撑管理层快速进行核心业务决策。