检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
实时评测和延时评测介绍 实时评测 图1 实时评测 实时评测的基本架构如上图所示,实时评测算法从仿真器和AD算法按帧接收数据,每接收一帧数据,就调用一次评测函数,在最后仿真结束时将评测结果写成评测pb文件。 实时评测的实现包括如下几个步骤: 代码内实现与仿真器的通信,实时接收仿真器
智驾模型服务 智驾模型简介 多模态检索 模型微调 场景识别 2D图像生成 2D预标注 3D预标注 3D预标注车道线检测 服务监控 智驾模型管理
2D图像生成:用户可自定义生成图像的参数,快速生成满足客户需求的2D图像。 2D预标注:支持选择本地图片快速进行标注任务。 服务监控:用户可方便地查看场景识别、2D图像生成、2D预标注的监控数据。 智驾模型管理:智驾模型管理列表中展示服务内置的初始模型和用户进行模型微调后的迭代模型。支持将微调后的迭
消息topic格式规范 Vehicle 对于车辆自身基本数据录制的消息格式,需遵循一定规范,其中部分字段为必选,其他请根据实际需要自由选取。 表1 vehicle消息格式规范 格式名称 说明 VehicleInfo 车辆信息 消息格式中部分参数为必选,如使用该数据类型,则不可缺少
消息topic格式规范 Vehicle 对于车辆自身基本数据录制的消息格式,需遵循一定规范,其中部分字段为必选,其他请根据实际需要自由选取。 表1 vehicle消息格式规范 格式名称 说明 VehicleInfo 车辆信息 消息格式中部分参数为必选,如使用该数据类型,则不可缺少
消息topic格式规范 Vehicle 对于车辆自身基本数据录制的消息格式,需遵循一定规范,其中部分字段为必选,其他请根据实际需要自由选取。 表1 vehicle消息格式规范 格式名称 说明 VehicleInfo 车辆信息 消息格式中部分参数为必选,如使用该数据类型,则不可缺少
创建任务配置 创建仿真任务配置时需要完成基本配置、算法配置,评测项配置和选择场景几部分的内容。创建任务配置的步骤可参考如下: 在左侧菜单栏中单击“仿真服务 > 并行仿真”。 选择“任务配置”页签,单击“新建任务配置”,参考下表配置仿真任务基本信息。 图1 创建任务配置 表1 仿真任务配置基础信息说明
仿真任务 任务配置 创建仿真任务配置时需要完成基本配置、算法配置,评测项配置和选择场景几部分的内容。创建任务配置的步骤可参考如下: 在左侧菜单栏中单击“仿真服务 > 并行仿真”。 选择“任务配置”页签,单击“新建任务配置”,参考下表配置仿真任务基本信息。 图1 创建任务配置 表1 仿真任务配置基础信息说明
tee软件,请确保基础镜像内包含上述软件且能通过PATH找到。 一般情况下,训练与评测定义为同一个引擎,主要包括算法或评测脚本运行所需要的基本依赖环境。用户可使用命令行模式或Dockerfile模式进行构建。以训练、评测镜像为例,一般的镜像制作Dockerfile示例如下(xxx替换为实际路径):
标注镜像Dockerfile示例 一般情况下,引擎主要包含预标注算法或预审核算法运行所需要的基本依赖环境,用户也可将预标注算法或预审核算法包内置在AI引擎中。 用户可使用命令行模式或Dockerfile模式进行构建。 以预标注自定义镜像为例,一般的镜像制作Dockerfile示例如下(xxx替换为实际路径):
控制效果。 创建仿真任务配置时需要完成基本配置、算法配置,评测项配置和选择场景几部分的内容。创建任务配置的步骤可参考如下: 在左侧菜单栏中单击“仿真服务 > 并行仿真”。 选择“任务配置”页签,单击“新建任务配置”,参考下表配置仿真任务基本信息。 图1 创建任务配置 表1 仿真任务配置基础信息说明
适用于道路特征提取、语义分割等不规则图形标注 适用于2.5D数据标注 适用于点云等3D矩形框标注 说明: 标注:需人工选择标注,并进行标注。 智能缩框标注:智能缩进标注框。 添加/删除锚点:锚点可辅助确认车辆的大小。 根据标注规范,进行标注。 修改标注框。 根据标注对象不同,修改方式也有所不同。修改方式可参考以下示例。
双击3D框进入修改状态,可对3D框的三视图进行调整。 无 从上至下依次是: 标注 智能缩框标注 标注:在标注类别中选择标注框,进行普通3D框标注。 智能缩框标注:可根据框选范围内点云大小智能缩进标注框。 标注:V 智能缩框标注:B 从上至下依次是: 旋转 旋转90° 旋转180° 旋转点云
各项得分。任务详情页面展示了评测任务详情信息以及评测模型结果信息两部分内容。 任务详情 任务详情页面,详细展示了任务名称、类别、资源规格等基本信息。 图1 任务详情 任务视图 根据用户选择“自定义”或“内置”评测方式,详情页会展示以下三种流程图: 自定义评测 图2 自定义评测 内置指标评测
评测算法的自研proto接口 背景 Octopus内置一套评测算法,用于对自动驾驶系统的性能表现进行多维度评测。内置评测算法的评测结果按照eva.proto中的定义,序列化成pb文件保存起来。 Octopus仿真平台的前端通过解析评测pb对评测结果进行展示,目前控制台展示主要分为两大方面:
桶路径。OBS桶路径获取方法请参考创建对象存储服务。 根据需要生成的图片设置对应的参数。 系统会根据设置的参数查询可选对象框模板,您可以直接选择一个对象框模板,再在模板中选择对象框。如果系统未查到可选的对象框模板,建议您尝试切换相机视角,切换对象类型或者减少对象数量。 图2 创建2D图像参数
"labels":[], "labels_ext":{} } 不同类型的任务对象基本信息所需格式不同,具体如下所示: 2D目标检测: labels中保存每个预测对象的基本信息,每个基本信息格式如下所示。 { 'label_meta_id': 168, #标注
以上信息填写无误后,单击“确认”。仿真评测创建成功。 查看自定义评测镜像详情 评测类型为自定义评测镜像时,项目详情包含评测基本信息和评测镜像两部分。 图2 自定义评测镜像详情 基本信息:评测名称、评测名称、更新时间等信息。 评测镜像:该项目包含的镜像版本信息。 创建镜像 评测类型为自定义评测
仿真软件所在机器系统发生故障导致数据丢失或其他不可预知问题。 解决办法: 重启在线仿真软件并重新加载场景。 关闭在线仿真软件并重新启动,先单击 √图标,再单击在线仿真软件播放按钮。 图1 在线仿真软件播放按钮 恢复系统镜像至所需版本。 在线仿真所在机器,提供了系统镜像的备份、恢复
评测任务与评测参数和数据集有关。具体步骤如下: 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测任务”页签,单击“新建评测任务”,填写基本信息。 图1 新建评测任务 名称:任务组名称,包含中英文、数字、“_”“-”,不得超过32个字符。 描述:简要描述任务,不包含“@^\#$