AI开发平台MODELARTS-查看日志和性能:查看日志

时间:2024-12-09 20:36:34

查看日志

若查看启动作业日志信息,可通过以下命令打印正在启动的日志信息。其中${pod_name}为pod信息中的NAME,例如vcjob-main-0。

kubectl logs -f ${pod_name}

训练过程中,训练日志会在最后的Rank节点打印。

图1 打印训练日志

训练完成后,如果需要单独获取训练日志文件,可以在${SAVE_PATH}/logs路径下获取。日志存放路径为:/home/ma-user/ws/saved_dir_for_ma_output/llama2-70b/logs

support.huaweicloud.com/bestpractice-modelarts/modelarts_llm_train_91060.html