数据湖探索 DLI-在DataArts Studio开发DLI SQL作业:环境准备
环境准备
- DLI 资源环境准备
- 配置DLI作业桶
使用DLI服务前需配置DLI作业桶,该桶用于存储DLI作业运行过程中产生的临时数据,例如:作业日志、作业结果。具体操作请参考:配置DLI作业桶。
- 创建弹性资源池并添加SQL队列
弹性资源池为DLI作业运行提供所需的计算资源(CPU和内存),用于灵活应对业务对计算资源变化的需求。
创建弹性资源池后,您可以在弹性资源池中创建多个队列,队列关联到具体的作业和数据处理任务,是资源池中资源被实际使用和分配的基本单元,即队列是执行作业所需的具体的计算资源。
同一弹性资源池中,队列之间的计算资源支持共享。 通过合理设置队列的计算资源分配策略,可以提高计算资源利用率。
具体操作请参考:创建弹性资源池并添加队列。
- 配置DLI作业桶
- DataArts Studio 资源环境准备
- 购买DataArts Studio实例
在使用DataArts Studio提交DLI作业前,需要先购买DataArts Studio实例。
具体操作请参考购买DataArts Studio基础包。
- 进入DataArts Studio实例空间
- 购买DataArts Studio实例