数据湖探索 DLI-使用Spark作业访问DLI元数据:步骤2:OBS桶文件配置

时间:2024-12-05 10:45:40

步骤2:OBS桶文件配置

  1. 如果需要创建OBS表,则需要先上传数据到OBS桶目录下。
    本次演示的样例代码创建了OBS表,测试数据内容参考如下示例,创建名为的testdata.csv文件。
    12,Michael
    27,Andy
    30,Justin
  2. 进入OBS管理控制台,在“桶列表”下,单击已创建的OBS桶名称,本示例桶名为“dli-test-obs01”。
  3. 单击“上传对象”,将testdata.csv文件上传到OBS桶根目录下。
  4. 在OBS桶根目录下,单击“新建文件夹”,创建名为“warehousepath”的文件夹。该文件夹路径用来存储Spark创建表的元数据信息“spark.sql.warehouse.dir”。
support.huaweicloud.com/devg-dli/dli_09_0176.html