检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
智驾模型 智驾模型微调后,需要对模型进行评测,并把模型部署到环境上进行推理,方便用户使用自己的数据训练得到专属模型进行推理,及比对训练效果。 智驾模型列表中展示服务内置的初始模型和用户进行模型微调后的迭代模型。 图1 智驾模型列表 智驾模型列表相关操作 智驾模型列表可以进行以下操作。
训练算法 添加自定义算法 添加自定义算法流程为“初始化训练算法 > 选择训练算法文件 > 上传训练算法文件”。具体操作步骤如下: 在左侧菜单栏中单击“训练服务 > 算法管理”。 单击“新建训练算法”,填写算法基本信息。 图1 新建训练算法 名称:包含中英文、数字、“_”“-”,不得超过64个字符。
外置算法文件”,参数填写完毕后执行4。 表1 新建训练算法 参数 说明 类型 训练算法的类型。 镜像 + 外置算法文件:训练算法文件与镜像独立存在,创建训练算法时需选择镜像,并上传准备好的训练算法文件,训练任务启动时会把文件下载到容器中,并把算法根目录作为工作目录。 仅镜像(包含算法文件):训练算法文件包含在镜像
创建评测脚本 添加评测脚本流程为“初始化评测脚本 > 选择评测脚本文件 > 上传评测脚本文件”。具体操作步骤如下: 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测脚本”页签,单击“新建评测脚本”,填写脚本信息。 图1 新建评测脚本 名称:只能包含数字、英文、中文、下划线、中划线,不得超过64个字符。
完成模型配置。 模型级别:可选择“初始模型”和“迭代模型”。“初始模型”为Octopus平台提供的内置模型,“迭代模型”是用户二次微调后的模型。 输入模型:选择需要进行微调的模型和版本。初始模型提供的内置模型如下: 表1 Octopus平台提供的内置模型 模型名称 说明 hw_model_3d_detection
训练服务 训练服务简介 算法管理 开发环境 训练任务 模型评测 编译管理 推理服务 任务队列
训练服务 训练算法 模型评测 编译镜像 编译任务 父主题: 自动驾驶云服务全流程开发
模型仓库 模型仓库介绍 模型管理模块支持以模型仓库的方式对模型进行纳管和归档,每个模型仓库中又可以创建若干个模型版本,方便对同类模型统一管理。 模型包含镜像和文件两部分。其中镜像与模型仓库绑定,也就是说同一个模型仓库的版本共享一个镜像;文件存储在对象存储(OBS)中, 各个版本的文件一般不同。
制作ModelArts集群训练镜像 制作训练镜像 八爪鱼训练镜像使用ma-user用户运行,用户需保证镜像内已创建ma-user用户,且训练过程中使用到的python环境或其他依赖对ma-user具有权限。本地镜像构建完成后,需要将镜像上传到八爪鱼平台镜像仓库。 如果使用dock
. 镜像运行时,会向运行环境注入部分默认文件配置: 表1 环境变量说明 任务名称 文件名 环境变量 训练任务 增量模型目录 MODEL="/tmp/data/model" 训练产物目录 RESULT= "/tmp/result" 数据集目录 DATASET="/tmp/data/dataset/"
智驾模型简介 通过与AI模型、大模型的结合,提供高精度自动标注能力,大幅度降低传统人工标注数据真值的成本。提供场景数据集生成能力,帮助自动驾驶模型训练快速扩充数据集,低成本获取难例数据集。提供多模态场景理解和检索能力,帮助客户在海量样本库快速、智能的分类和检索。 智驾模型授权操作步骤
由编译镜像携带,参数名不支持修改,参数值支持修改。 环境变量 由编译镜像携带,参数名不支持修改,参数值支持修改。 模型 选择待编译模型和版本,模型可以为训练任务产生的模型版本或者通过本地模型文件上传产生的模型版本。 以上信息填写无误,单击“创建”。 编译任务相关操作 在“编译任务”列表,可对任务进行以下操作。
符。 模型:请选择推理服务使用的模型仓库和版本。容器中模型文件默认存放位置:${OCTOPUS_MODEL},运行镜像将使用当前模型仓库绑定的镜像。用于推理服务的镜像要求参见“镜像仓库 > 镜像制作(训练)> ModelArts集群”章节中的推理服务。 用于推理服务的模型,应避免在根目录下存在名为config
模型管理 模型仓库 模型文件说明(标注) 模型文件说明(训练) 父主题: 数据资产
致开发环境创建或启动时在队列中无法被调度。 资源挂载 - 可选择平台上现有的模型、训练算法和数据集,开发环境启动时以挂载的方式加载到容器中。最多可选择5条。 模型:可选择用途为训练的非空模型仓库。 训练算法:可选创建成功的算法。 数据集:可选择有创建成功版本且非空的数据集。 缓存挂载
制作镜像(训练) 制作CCE集群训练镜像 制作ModelArts集群训练镜像 父主题: 镜像仓库
编译镜像 编译镜像可以将训练模型转换为特定芯片支持的可识别的文件,编译镜像模块支持对编译镜像的增加、查询、删除以及编辑。 创建编译镜像 在左侧菜单栏中选择“训练服务 > 编译管理”。 选择“编译镜像”页签,单击“新建编译镜像”,填写如下信息。 表1 新建编译镜像 参数 描述 名称
预审核模型文件 预审核模型完成对已标数据的审核,并将审核结果和审核所用的审核规则按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的审核结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件
行各种操作。 增量训练模型目录 MODEL CCE: /tmp/data/model ModelArts: /home/ma-user/modelarts/user-job-dir/model 待增量模型版本在训练任务中的存放路径,可自行获取模型文件信息。 如果平台支持多类型资源
领域模型设计 以下为4个种子场景可以泛化的参数及范围,请确保在编写odr文件时各参数在以下描述范围内。 straight城区直行 merge匝道合流 split匝道分流 junction路口 one_way_junction单行线路口 父主题: 静态场景(地图)