华为云计算 云知识 湖仓构建数据湖建设和持续运营
湖仓构建数据湖建设和持续运营

场景描述

数据湖建设和持续运营,是指数据湖的初始化建设及后续日常的海量元数据及权限管理,因此客户需要便捷高效的建设和管理方式。

传统方式的弊端

· 仅支持通过计算引擎(Hive、Spark等)执行SQL实现元数据的定义、修改、查询,对客户有一定的技能要求,缺少提升易用性的可视化界面。

· 一个完整的授权活动,需要针对计算引擎、 对象存储 执行两次授权操作,对客户操作带来不便,易用性差。

服务优势

· 站式可视化数据湖构建:提供数据湖元数据统一定义和授权的可视化界面,支持客户便捷操作,快速构建。

· 联动授权:支持在元数据授权的同时, 自动化 完成元数据所映射的文件目录的授权,使客户授权操作更便捷和高效。

· 细粒度访问控制:实现针对数据湖的库、表、列级元数据的细粒度访问控制,为业务数据的安全性提供有力保障。

建议搭配服务: MapReduce服务 数据湖探索 DLI、 数据仓库 GaussDB、 数据治理中心 DataArts Studio、 AI开发平台 ModelArts

湖仓构建数据湖建设和持续运营

数据湖探索 DLI

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless大数据计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理、内存计算、机器学习等,挖掘和探索数据价值

 
进入控制台立即购买帮助文档DLI开发者社区1对1咨询                
               

           

上一篇:MapReduce服务智慧水务 下一篇:数据治理中心功能描述
免费体验云产品,快速开启云上之旅