数据湖探索 DLI-在DataArts Studio开发DLI SQL作业:环境准备

时间:2025-02-17 15:19:41

环境准备

  • DLI 资源环境准备
    • 配置DLI作业桶

      使用DLI服务前需配置DLI作业桶,该桶用于存储DLI作业运行过程中产生的临时数据,例如:作业日志、作业结果。具体操作请参考:配置DLI作业桶

    • 创建弹性资源池并添加SQL队列

      弹性资源池为DLI作业运行提供所需的计算资源(CPU和内存),用于灵活应对业务对计算资源变化的需求。

      创建弹性资源池后,您可以在弹性资源池中创建多个队列,队列关联到具体的作业和数据处理任务,是资源池中资源被实际使用和分配的基本单元,即队列是执行作业所需的具体的计算资源。

      同一弹性资源池中,队列之间的计算资源支持共享。 通过合理设置队列的计算资源分配策略,可以提高计算资源利用率。

      具体操作请参考:创建弹性资源池并添加队列

  • DataArts Studio 资源环境准备
    • 购买DataArts Studio实例

      在使用DataArts Studio提交DLI作业前,需要先购买DataArts Studio实例。

      具体操作请参考购买DataArts Studio基础包

    • 进入DataArts Studio实例空间
      1. 购买完成DataArts Studio实例后,单击“进入控制台”。
        图2 进入DataArts Studio实例控制台
      2. 单击“空间管理”,进入数据开发页面。

        购买DataArts Studio实例的用户,系统将默认为其创建一个默认的工作空间“default”,并赋予该用户为管理员角色。您可以使用默认的工作空间,也可以参考本章节的内容创建一个新的工作空间。

        如需创建新的空间请参考创建并管理工作空间
        图3 进入DataArts Studio实例空间
        图4 进入DataArts Studio数据开发页面
support.huaweicloud.com/devg-dli/dli_05_0081.html