检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
模型评测 在机器学习中,通常需要使用一定的方法和标准,来评测一个模型的预测精确度。自动驾驶领域通常涉及目标检测、语义分割、车道线检测等类别,如识别车辆、行人、可行区域等对象。 评测脚本 评测任务 任务队列 评测对比 模型数据集支持 父主题: 训练服务
如图,界面左侧显示的是该模型包内的所有文件,以目录树的形式展示,支持编程语言的渲染,支持MarkDown文件的实时双屏预览。 图10 在线编辑 新建文件夹:选中文件夹并单击,用户将新建一个该文件夹的子文件夹。选中工程文件并单击,将会新建一个新的文件夹,与用户已有的文件夹同级。
优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 数据类型:选择“数据包”。 选择数据:选择需要操作的数据包中的数据。 输出目录:选择可输出的通用存储的名称。 单击“创建”, 在任务管理页面可查看创建好的作业。 回放仿真作业相关操作 在“作业总览”页签,还可以完成以下操作。 表1
模型数据集支持 模型评测支持多种数据集格式,包括Octopus格式和部分常见开源数据集格式,以下为各类别模型的数据集支持列表和示例。 目标检测2D 目标检测3D 目标追踪2D 目标追踪3D 语义分割2D 语义分割3D 车道线检测 分类 父主题: 模型评测
该项目下仍有任务,则项目任务流程,标注团队,数据类型,需求方和项目类型均不支持修改。 删除项目 选择单个项目,单击操作栏的“更多 > 删除”,删除单个项目。 勾选多个项目,单击列表上方的“删除”,可批量删除项目。 说明: 删除项目前需删除项目内包含的标注任务。 查看项目详情 单击操作栏内的“ 项目详情”,即可查看项目详情,具体请参考项目详情。
仿真服务可以提供基于云资源的大规模并行仿真。仿真过程中,涉及资源配置与调度。合理配置任务的资源占用,可以尽可能地提高资源利用率,进而提高仿真测试并行度,增加算法测试的里程数。 获取并配置算法实际资源占用 创建仿真算法时,需要填写算法镜像占用的CPU以及内存。这个将影响批量仿真子任务的资源调度,在
查看算法详情。 算法新建后,在“算法列表”可以查看新建的算法,单击指定“算法名称”,可以查看算法的基本信息和算法详情。 算法列表相关操作 表1 算法列表相关操作 任务 操作步骤 搜索算法 在搜索框中输入关键字搜索相关算法。支持通过算法名称和算法ID搜索。 查看算法详情 单击算法名称,即可查看算法详情页。
并行仿真 Octopus平台的并行仿真模块分为任务配置和仿真任务两部分。用户在任务配置模块,可使用自研仿真算法,根据Octopus自研仿真评测体系,从行车安全、驾驶行为、乘员舒适性等多维度测评在多种条件下的仿真场景中控制算法控制质量。在仿真任务模块,可将仿真任务运行中关键指标变化绘制成图表,直观形象。
在建模过程中,由于偏差过大导致的模型欠拟合以及方差过大导致的过拟合的存在,因此需要一套评价体系,来评估模型的泛化能力。 在线仿真 仿真即通过软件模拟车辆行驶的路况和场景,不需要真实的环境和硬件,极大节省训练和测试的成本和时间。Octopus仿真服务预置了智能驾驶、主动安全、危险场景等六大场景实例,覆盖大
说明: 用例状态为“已关闭”和“已发布”的测试用例不允许删除和发布。 用例状态为“已关闭”和“编辑中”的测试用例不允许关闭。 用例再利用 单击用例名称后“操作”栏内的“另存为”,输入新的测试用例名称,可以测试用例进行复制。 历史结果对比 单击用例名称后操作栏内的“更多 > 历史结果对比”。
操作步骤 修改在线服务 单击操作栏中的“修改”,修改在线服务。“启动中”的在线服务不支持修改。 预测在线服务 单击操作栏中的“预测”,跳转至2D预标注界面,进行预测,测试模型的推理能力。只有“运行中”的在线服务支持预测。 启动在线服务 单击操作栏中的“更多 > 启动”,启动在线服务。
在“仿真任务列表”,单击“运行”,创建仿真任务。 图1 创建任务 单击“确认”,仿真任务创建完成。 创建完毕的任务,在任务配置详情页的“仿真任务列表”可查看详情。也可在“仿真任务”页签查看详情。 任务配置相关操作 在任务配置详情页的“仿真任务列表”或“仿真任务”页签,可对仿真任务进行以下操作。 表1 任务配置相关操作
如何查看用户拥有的权限? 使用账号登录华为云。 在页面左上方单击“控制台”,进入华为云管理控制台。 图1 控制台入口 在控制台右上角的账户名下方,单击“统一身份认证”,进入“统一身份认证服务”页面。 图2 我的凭证 查找用户。 图3 查找用户 单击用户名进入用户详情,查看用户所属用户组。
数据场景 Octopus平台处理完原始采集数据后,平台支持内置和自定义场景挖掘算法,可自动提取对应场景行为的片段,展示在数据场景模块中。用户可将其生成单个仿真场景片段,为后续仿真开发做准备。 数据场景依赖以下三个topic:ego_tf(主车定位)、 object_array_v
在“算子”列表,可查看新创建的算子。 算子管理相关操作 在“算子管理”页签,还可以完成以下操作。 表2 算子管理相关操作 任务 操作步骤 查看算子详情 单击操作栏的“详情”,可查看算子的详情 编辑算子 单击操作栏的“编辑”,可编辑算子的详情。 删除算子 单击操作栏的“删除”,可删除算子的详情。 搜索算子
单击“载入”后,左侧会出现选择的数据。 图3 载入数据 在右侧选择“添加框图”,右侧出现空白的框图。 图4 添加框图 选择左侧的数据,右侧将高亮显示对应的数据,内置评测信号参数请参考内置评测信号参数。 图5 评测信号 可根据需要添加数据和框图,也可根据需要选择框图的横向和纵向布局。 单击可删
搜索评测 在搜索框中输入关键字搜索相关评测。支持通过评测名称、评测ID和评测类型搜索。 查看评测详情 单击评测名称,页面跳转至评测详情页。 编辑评测 单击操作栏中的“编辑”,可编辑评测的信息。 删除评测 单击操作栏中的“删除”,可删除该评测。 父主题: 评测管理
Octopus平台在线仿真模块为用户提供了在线仿真器。单击进入在线仿真器,用户进入机器后,机器显示红色按钮占用,用户退出在线仿真界面不会自动释放机器,会保持占用状态。机器图片的左上角会出现释放按钮,只有占用中的用户可以释放。 图1 仿真器 加载场景 Octopus平台支持用户在仿真器中加载场景库中的场景,在线编辑、运行并回放。
1.1的场景预览,存在完整的逻辑场景文件时显示。 地图场景预览:逻辑场景文件缺失或部分缺失,逻辑场景文件解析失败或其他不支持动态场景预览的情况时显示。 动态场景预览 逻辑场景的动态场景预览同具体场景的动态场景预览相同,可参考具体场景的动态场景预览。 地图场景预览 逻辑场景的地图场
本设计考虑换道时刻的前后2s的时间段内的侧向加速度是否太大, 对于侧向加速度大于一定阈值(可用户自定义,本设计取2m/s2), 则换道时的侧向加速度检测不通过。 对于判断换道持续时间是否合理, 本设计以主车相对车道中心线的偏离横摆角作为换道开始和结束的判定标记, 在换道时刻之前的第一个偏离横摆角小于0.03rad的时间点为换道开始点,