检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
模型评测 在机器学习中,通常需要使用一定的方法和标准,来评测一个模型的预测精确度。自动驾驶领域通常涉及目标检测、语义分割、车道线检测等类别,如识别车辆、行人、可行区域等对象。 评测脚本 评测任务 任务队列 评测对比 模型数据集支持 父主题: 训练服务
需要用户先准备好模型包,具体要求请参见模型文件说明。 关闭 无需上传 否 空模型。 单击“初始化”,完成模型仓库的创建。 查看模型仓库详情。 单击模型仓库名称,进入该模型仓库的详情页面,分为模型仓库详情和版本管理两部分内容。 模型仓库详情:模型仓库的详细信息,如模型ID、名称、描述
完成模型配置。 图1 模型配置 模型级别:可选择“初始模型”和“迭代模型”。“初始模型”为Octopus平台提供的内置模型,“迭代模型”是用户二次微调后的模型。 输入模型:选择需要进行微调的模型和版本。当前支持2D预标注模型进行模型微调。 输出模型:模型微调后存储的模型仓库。
智驾模型 智驾模型列表中展示服务内置的初始模型和用户进行模型微调后的迭代模型。 图1 智驾模型列表 智驾模型列表相关操作 智驾模型列表可以进行以下操作。 表1 智驾模型列表相关操作 任务 操作步骤 编辑模型 单击操作栏中的“编辑”,编辑智驾模型。仅支持修改描述信息。初始模型不支持编辑。
模型管理 模型仓库 模型文件说明(标注) 模型文件说明(训练) 父主题: 数据资产
模型评测 创建评测脚本 创建评测任务 父主题: 训练服务
预审核模型文件 预审核模型完成对已标数据的审核,并将审核结果和审核所用的审核规则按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的审核结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件
模型文件基本要求 模型文件通常包括模型图和模型权重文件,具体内容视用户算法决定,无其他要求。如果需要使用内置指标计算,则需满足以下条件: 自定义模型包中必须包含推理启动文件以及自定义模型文件,其中推理启动文件需要根据Octopus数据格式对推理结果存储为json进行适配,除此之外
智驾模型简介 通过与AI模型、大模型的结合,提供高精度自动标注能力,大幅度降低传统人工标注数据真值的成本。提供场景数据集生成能力,帮助自动驾驶模型训练快速扩充数据集,低成本获取难例数据集。提供多模态场景理解和检索能力,帮助客户在海量样本库快速、智能的分类和检索。 前提条件 开通相
自定义模型文件 自定义模型文件“xxx.pb”,需要通过编写自定义脚本加载并使用。自定义模型文件的存放位置及名称可自定义,可以将相关模型文件保存至子文件夹中,也可以保存至根目录下。 环境变量使用说明 模型推理所需的待标注数据集目录、预标注结果数据目录、标注物文件目录、模型文件目录
智驾模型管理 智驾模型微调后,需要对模型进行评测,并把模型部署到环境上进行推理,方便用户使用自己的数据训练得到专属模型进行推理,及比对训练效果。 智驾模型 在线服务 父主题: 智驾模型服务
领域模型设计 以下为4个种子场景可以泛化的参数及范围,请确保在编写odr文件时各参数在以下描述范围内。 straight城区直行 merge匝道合流 split匝道分流 junction路口 one_way_junction单行线路口 父主题: 静态场景(地图)
模型文件说明(训练) Octopus模型管理模块,支持用户上传模型,并将其用于模型评测、模型编译任务。如果需要将模型用于内置评测模板评测,除模型文件外,需另外包含推理启动文件: customer_inference.py 仅当需要使用内置评测指标计算时需要添加推理启动文件,文件名称可自定义,将该文件置于模型目录下。
模型文件说明(标注) 模型文件可用于预标注任务、预审核任务。不同任务所需的模型文件要求不同。 预标注模型文件 预审核模型文件 父主题: 模型管理
在线服务 微调后的迭代模型创建在线服务,进行推理,查看预测效果。每类迭代模型,只能同时运行一个在线服务,如果已经存在“运行中”的在线服务,将无法继续创建该类在线服务。 创建在线服务 在左侧菜单栏中选择“智驾模型服务 > 智驾模型管理”。 选择“在线服务”页签,单击“创建在线服务”。
模型数据集支持 模型评测支持多种数据集格式,包括Octopus格式和部分常见开源数据集格式,以下为各类别模型的数据集支持列表和示例。 目标检测2D 目标检测3D 目标追踪2D 目标追踪3D 语义分割2D 语义分割3D 车道线检测 分类 父主题: 模型评测
智驾模型服务 智驾模型简介 多模态检索 模型微调 场景识别 2D图像生成 2D预标注 3D预标注 3D预标注车道线检测 服务监控 智驾模型管理
json { "label_meta_name": "Car", # 推理文件包含得分 "score": 0.85 } 父主题: 模型数据集支持
开通智驾模型微调服务 在使用智驾模型服务模型微调功能之前,需先开通智驾模型微调服务。开通后,当模型微调状态为“运行中”,会根据创建模型微调任务时选择的资源按需计费。 开通服务 登录Octopus服务平台,在左侧菜单栏中单击“总览”。 在“模型微调”模块,单击操作栏中的“开通服务”。
png +--- 000001.png +--- 000002.png 示例标注/推理文件 2D语义分割-palette.png 父主题: 模型数据集支持