数据湖探索 DLI-查询Spark作业日志:前提条件

时间:2024-08-27 16:21:33

前提条件

配置前,请先购买OBS桶或并行文件系统。大数据场景推荐使用并行文件系统,并行文件系统(Parallel File System)是 对象存储服务 (Object Storage Service,OBS)提供的一种经过优化的高性能文件系统,提供毫秒级别访问时延,以及TB/s级别带宽和百万级别的IOPS,能够快速处理高性能计算(HPC)工作负载。

并行文件系统的详细介绍和使用说明,请参见《并行文件系统特性指南》

support.huaweicloud.com/usermanual-dli/dli_01_0379.html