AI开发平台MODELARTS-训练作业一直在等待中(排队)?

时间:2024-11-06 21:52:48

训练作业一直在等待中(排队)?

训练作业状态一直在等待中状态表示当前所选的资源池规格资源紧张,作业需要进行排队,请耐心等待。如想降低排队时间,根据您所选资源池的类型,有以下建议:

  1. 公共资源池:

    公共资源池资源较少,高峰期如举办相关活动时会存在资源不足情况。有以下方法可以尝试:

    • 如果使用的是免费规格,可以换成收费规格,免费规格资源较少,排队概率高。
    • 规格选择卡数尽量少,如可以选择1卡,相比于选择8卡排队几率大大降低。
    • 可以尝试使用其他Region(如北京四切换为上海一)。
    • 如果有长期的资源使用诉求,可以购买独占使用的专属资源池。
  2. 专属资源池:
    • 如有多个可用的专属资源池,可尝试选择其他较为空闲的资源池。
    • 可清理当前资源池下的其他资源,如停止长时间不使用的Notebook。
    • 在非高峰期时提交训练作业。
    • 如长期长时间排队可以联系该专属资源池的账号管理员,管理员可根据使用情况对资源池进行扩容。

相关问题:为什么资源充足还是在排队?

support.huaweicloud.com/modelarts_faq/modelarts_05_0363.html