检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
选择自定义评测和内置指标评测 自定义评测: 评测脚本:可选,如果用户有其他自定义评测脚本,可勾选该项将选择的脚本路径挂载至容器内部,用户可使用${SCRIPT}进行引用。 评测启动指令:用户指定自定义评测的启动命令,根据用户选择注入以下环境变量: 表1 环境变量 类型 启动命令 默认值
内置评测配置 创建内置评测配置 在左侧菜单栏中单击“仿真服务 > 评测管理”。 单击“新建评测”,填写基本信息。 图1 新建评测 评测名称:只能包含数字、英文、中文、下划线、中划线,不得超过64个字符。 评测描述:不得包含“@#$%^&*< > \”特殊字符,不得超过255个字符。
指导请参考标注样例。语言标注任务的详情操作指导请参考语音标注任务。文本标注任务的详情操作指导请参考文本标注任务。 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称。 选择“批次任务列表”,单击批次任务的,单击子任务名称,进入标注子任务详情页面。 单击任意一张图片,单击“人工标注”。
预审核任务 前提 当批次子任务配置并启动了预审核任务时,预审核任务界面才会显示预审核任务详情。 图1 预审核任务详情 预审核任务相关操作 在“预审核任务”列表,还可以进行以下操作。 表1 预审核任务相关操作 任务 操作步骤 查询预审核任务 在搜索输入框中输入搜索条件,按回车键即可查询任务。
前提条件 完成OBS授权委托,具体操作步骤请参考授权操作步骤。 在服务控制台“总览”>“我的模型”区域,开通“2D图像生成”服务,具体操作步骤请参考开通我的模型和购买套餐包。 操作步骤 在左侧菜单栏中单击“智驾模型服务”。 选择“2D图像生成”页签,单击“创建”,填写信息。 图1 创建2D图像基本信息
在模型详情页,查看模型基本信息和模型版本列表。可以对模型版本进行“模型微调”、“创建在线服务”和“删除”操作。 说明: 初始模型不支持“创建在线服务”和“删除”。 只有“创建成功”的模型版本支持“模型微调”和“创建在线服务”。 查询模型 在搜索输入框中输入搜索条件,按回车键即可查询。 父主题: 智驾模型管理
请尝试重新上传或者联系运维人员 导入作业结果失败 请尝试重新上传或者联系运维人员 算子不存在 请检查算子是否存在 预处理失败 请尝试重启作业 获取实例资源异常 请检查运维配置是否正确 资源需求超出节点总量 请检查作业资源规格和节点资源总量 标签或自定义属性无效 请检查算子输出的标签或自定义属性是否正确
于数据总览、数据场景、数据回放、标注服务等模块,请用户结合实际需求,准备好相应模块所需数据。 Octopus平台转换后的OpenData数据服务模块所需数据请见下表: 表2 数据和模块对应关系 类型 消息 数据总览 数据场景 数据回放 标注服务 相机 camera - - √ √
预审核的方式是使用审核模型,生成预审核作业,对标注任务进行审核,可快速得到标注任务的质量指标,通过报告展示预审核结果。 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称。 选择“批次任务列表”,单击批次任务前的。 单击子任务操作栏中的“更多 > 审核”,配置审核配置。
选择属性。 修改对象ID。 右键单击目标图形,可以在对象ID栏手动输入数值来修改ID。 快捷键使用说明 Octopus平台提供快捷键使用,用户可以利用快捷键快速完成标注,提高标注效率。 表1 快捷键使用说明 快捷键 功能 Ctrl+S 保存 O 点云图复位 V 默认标注 B 智能标注
语音标注任务 语音标注任务是指对单段落语音或多段落进行语音标注,提供单段落和多段落语音标注模板工具,通过管理平台进行标签和属性的配置,支持智能语音交互场景下每一个细分环境的标注,也支持整个交互闭环的整体标注。支持讲话人属性(性别、角色等)配置,支持意图识别、问答标注和设备状态标注
测试用例管理 测试用例模块支持对单个用例的增删改查操作。用户可根据场景类型,本地选择对应的场景文件。用例创建完毕后,用户可选择在线仿真机器加载测试用例,通过仿真器内置算法检验测试用例质量。 创建用例 用例管理 父主题: 场景管理
3D预标注 3D预标注 3D2D融合预标注 父主题: 智驾模型服务
单帧识别 前提条件 在服务控制台“总览”>“我的模型”区域,开通“场景识别”服务,具体操作步骤请参考开通我的模型和购买套餐包。 操作步骤 在左侧菜单栏中单击“智驾模型服务”>“场景识别” 。 选择“单帧识别”页签,单击右上角“添加文件”。 在“文件上传”弹出框中,单击“添加文件”
模型数据集支持 模型评测支持多种数据集格式,包括Octopus格式和部分常见开源数据集格式,以下为各类别模型的数据集支持列表和示例。 目标检测2D 目标检测3D 目标追踪2D 目标追踪3D 语义分割2D 语义分割3D 车道线检测 分类 父主题: 模型评测
内置评测指标说明 内置评测指标简介 减速度(Deceleration)检测 急转向(Steering)检测 急刹(Emergency Braking)检测 加速度变化率(Jerk)检测 平稳起步(Gentle Start)检测 平顺性(Ride Comfort)检测 乘员舒适性(Driving
获取账号ID 在调用接口的时候,部分URL中需要填入账号ID,所以需要先在管理控制台上获取到账号ID。账号ID获取步骤如下: 登录管理控制台。 单击用户名,在下拉列表中单击“我的凭证”。 在“API凭证”页面中查看账号ID。 图1 获取账号ID 父主题: 附录
API概览 Octopus自动驾驶云服务所提供的接口均为自研接口。 通过Octopus自动驾驶云服务自研接口,您可以使用Octopus自动驾驶云服务公共服务、数据资产、数据处理和仿真服务等功能。 表1 API概览 类型 说明 镜像仓库 包括获取镜像仓库列表、创建镜像仓库、修改镜像仓库、删除镜像仓库的接口。
碰撞(Collision)检测 碰撞检测的目的是判断主车是否与其它交通参与物发生碰撞。 在进行碰撞检测时,根据与主车碰撞的物体类型的不同对碰撞类型进行细分。 具体分为: 车的车碰撞检测 追尾检测 被追尾检测 正面对碰检测 垂直角度碰撞检测 斜角侧碰检测 车人碰撞检测 自行车碰撞检测
限速(Speeding)检测 限速检测的目的是判断主车的车速是否超过道路默认限速。 本设计采用最大默认限速120km/h。 该阈值可通过前端进行自定义配置。 父主题: 内置评测指标说明