AI开发平台MODELARTS-准备代码:工作目录介绍

时间:2024-11-12 16:42:41

工作目录介绍

详细的工作目录参考如下,建议参考以下要求设置工作目录。
${workdir}(例如/home/ma-user/ws )
|──llm_train                    #解压代码包后自动生成的代码目录,无需用户创建
      |── LLaMAFactory                # 代码目录
              |──ascendcloud_patch/   # 针对昇腾云平台适配的功能代码包
              |──demo.sh              # 指令微调启动shell脚本
              |──demo.yaml            # 样例yaml配置文件
              |──intall.sh            # 需要的依赖包
              |──LLaMA-Factory        # 执行install.sh后生成此目录,容器内执行参考Step3 启动容器镜像
                   |──data            # 原始数据目录,如使用自定义数据,参考准备数据(可选)
|── tokenizers                        #始权重/tokenizer目录,用户手动创建,用户根据实际规划目录修改,后续操作步骤中会提示
      |── Qwen2-72B
# 输出权重及日志路径,用户可根据实际自行规划,无需手动创建,此路径对应表1表格中output_dir参数值
|── saved_dir_for_output_lf            # 训练输出保存权重,目录结构会自动生成,无需用户创建
      |── ${model_name}                # 模型名称,根据实际训练模型创建,训练完成权重文件及日志目录	      
support.huaweicloud.com/bestpractice-modelarts/modelarts_llm_train_90824.html