数据湖探索 DLI-约束与限制:资源相关约束限制

时间:2024-08-27 11:50:48

资源相关约束限制

  • 数据库
    • “default”为内置数据库,不能创建名为“default”的数据库。
    • DLI 支持创建的数据库的最大数量为50个。
  • 数据表
    • DLI支持创建的表的最大数量为5000个。
    • DLI支持创建表类型:
      • Managed:数据存储位置为DLI的表。
      • External:数据存储位置为OBS的表。
      • View:视图,视图只能通过SQL语句创建。
      • 跨源表:表类型同样为External。
    • 创建DLI表时不支持指定存储路径。
  • 数据导入
    • 仅支持将OBS上的数据导入DLI或OBS中。
    • 支持将OBS中 CS V,Parquet,ORC,JSON和Avro格式的数据导入到在DLI中创建的表。
    • 将CSV格式数据导入分区表,需在数据源中将分区列放在最后一列。
    • 导入数据的编码格式仅支持UTF-8。
  • 数据导出
    • 只支持将DLI表(表类型为“Managed”)中的数据导出到OBS桶中,且导出的路径必须指定到文件夹级别。
    • 导出文件格式为json格式,且文本格式仅支持UTF-8。
    • 支持跨账号导出数据,即B账户对A账户授权后,A账户拥有B账户OBS桶的元数据信息和权限信息的读取权限,以及路径的读写权限,则A账户可将数据导出至B账户的OBS路径中。
  • 程序包
    • 程序包支持删除,但不支持删除程序包组。
    • 支持上传的程序包类型:
      • JAR:用户jar文件。
      • PyFile:用户Python文件。
      • File:用户文件。
      • ModelFile:用户AI模型文件。

更多资源相关约束限制请参考数据管理

support.huaweicloud.com/productdesc-dli/dli_07_0005.html