数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark和Apache Flink生态, 实现批流一体的Serverless 大数据 计算分析服务。DLI支持多模引擎,企业仅需使用SQL或程序就可轻松完成异构数据源的批处理、流处理等,挖掘和探索数据价值。DLI用户可以通过可视化界面、Restful API、JDBC、ODBC、Beeline等多种接入方式对云上CloudTable、RDS和DWS等异构数据源进行查询分析,数据格式兼容CSV、JSON、Parquet、Carbon和ORC五种主流数据格式。
华为云提供了Web化的服务管理平台,既可以通过管理控制台和基于HTTPS请求的API(Application programming interface)管理方式来访问DLI,又可以通过JDBC或ODBC等客户端连接DLI服务端。
产品功能。
All in SQL:无需大数据背景,会SQL就会大数据分析。SQL语法全兼容标准ANSI SQL 2003
Serverless Spark/Flink:完全兼容Apache Spark、Apache Flink生态和接口,线下应用可无缝平滑 迁移 上云,减少迁移工作量;批流一体架构,一份资源支持多种计算类型
跨源分析:支持多种数据格式,云上多种数据源、ECS自建 数据库 以及线下数据库,数据无需搬迁,即可实现对云上多个数据源进行构建企业的统一视图,帮助企业快速完成业务创新和数据价值探索
企业级多租户:支持对计算资源和数据按租户进行细粒度授权管理,满足中大企业使用数据中台时对权限管理的需求