数据湖探索 DLI-概述

时间:2025-02-12 15:00:54

概述

DLI 支持原生Spark的DataSource能力,并在其基础上进行了扩展,能够通过SQL语句或者Spark作业访问其他数据存储服务并导入、查询、分析处理其中的数据,目前支持的DLI跨源访问服务有: 表格存储服务 CloudTable, 云搜索服务 CSS,分布式缓存服务D CS ,文档数据库服务DDS, 数据仓库 服务 GaussDB (DWS), MapReduce服务 MRS,云数据库RDS等。使用DLI的跨源能力,需要先创建跨源连接。

管理控制台界面具体操作请参考《 数据湖探索 用户指南》。

使用Spark作业跨源访问数据源支持使用scala,pyspark和java三种语言进行开发。

support.huaweicloud.com/devg-dli/dli_09_0020.html