数据湖探索 DLI-产品优势:Serverless DLI

时间:2025-02-12 15:01:36

Serverless DLI

DLI完全兼容Apache SparkApache Flink生态和接口,是集实时分析、离线分析、交互式分析为一体的Serverless大数据计算分析服务。线下应用可无缝平滑迁移上云,减少迁移工作量。采用批流融合高扩展性框架,为TB~EB级数据提供了更实时高效的多样性算力,可支撑更丰富的大数据处理需求。产品内核及架构深度优化,综合性能是传统MapReduce模型的百倍以上,SLA保障99.95%可用性。

图1 DLI Serverless架构

与传统自建Hadoop集群相比,Serverless架构的DLI还具有以下优势:

表1 Serverless DLI与传统自建Hadoop集群对比的优势

优势

维度

数据湖探索 DLI

自建Hadoop系统

低成本

资金成本

按照实际扫描数据量或者CU时收费,可变成本,成本可节约50%。

长期占用资源,资源浪费严重,成本高。

弹性扩缩容能力

基于容器化Kubernetes,具有极致的弹性伸缩能力。

无。

免运维

运维成本

即开即用,Serverless架构。

需要较强的技术能力进行搭建、配置、运维。

高可用

具有跨AZ容灾能力。

高易用

学习成本

学习成本低,包含10年、上千个项目经验固化的调优参数。同时提供可视化智能调优界面。

学习成本高,需要了解上百个调优参数。

支持数据源

  • 云上:OBS、RDS、DWS、 CSS 、MongoDB、Redis。
  • 云下:自建数据库、MongoDB、Redis。
  • 云上:OBS。
  • 云下:HDFS。

生态兼容

DLV 、永洪BI、帆软。

大数据生态工具。

自定义镜像

支持,满足业务多样性。

无。

工作流调度

DataArts Studio -DLF调度。

自建大数据生态的调度工具,如Airflow。

企业级多租户

基于表的权限管理,可以精细化到列权限。

基于文件的权限管理。

高性能

性能

基于软硬件一体化的深度垂直优化。

大数据开源版本性能。

support.huaweicloud.com/productdesc-dli/dli_07_0007.html