数据湖探索 DLI-了解数据目录、数据库和表:数据库和表的约束与限制

时间:2025-01-26 10:47:50

数据库和表的约束与限制

表1 DLI 资源相关约束限制

限制项

说明

数据库

  • “default”为内置数据库,不能创建名为“default”的数据库。
  • DLI支持创建的数据库的最大数量为50个。

数据表

  • DLI支持创建的表的最大数量为5000个。
  • DLI支持创建表类型:
    • Managed:数据存储位置为DLI的表。
    • External:数据存储位置为OBS的表。
    • View:视图,视图只能通过SQL语句创建。
    • 跨源表:表类型同样为External。
  • 创建DLI表时不支持指定存储路径。

数据导入

  • 仅支持将OBS上的数据导入DLI或OBS中。
  • 支持将OBS中 CS V,Parquet,ORC,JSON和Avro格式的数据导入到在DLI中创建的表。
  • 将CSV格式数据导入分区表,需在数据源中将分区列放在最后一列。
  • 导入数据的编码格式仅支持UTF-8。

数据导出

  • 只支持将DLI表(表类型为“Managed”)中的数据导出到OBS桶中,且导出的路径必须指定到文件夹级别。
  • 导出文件格式为json格式,且文本格式仅支持UTF-8。
  • 支持跨账号导出数据,即B账户对A账户授权后,A账户拥有B账户OBS桶的元数据信息和权限信息的读取权限,以及路径的读写权限,则A账户可将数据导出至B账户的OBS路径中。
support.huaweicloud.com/usermanual-dli/dli_01_0228.html