检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据资产简介 在自动驾驶产品的开发过程中,海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能,供后续服务进行统一使用。数据服务开发流程如下: 图1 数据服务开发流程 地图管理:支持上传高精地图数据,可用于数据回放、仿真场景等功能。
项目内标注物管理 项目内标注物管理展示该项目下创建的标注物,只与该项目关联。 创建标注物 在左侧菜单栏中选择“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称,进入项目内任务列表。 选择“标注物管理”页签,单击“创建标注物”,填写相关信息。 表1 创建标注物参数 参数
3D回放 3D回放页面支持加载本地OSI,OpenDRIVE文件,以便于回放本地场景。 在左侧菜单栏中选择“仿真服务 > 并行仿真”。 在界面的右上角,单击“3D回放”,进入到3D回放界面。 单击界面右上角“加载本地文件”。 添加需要加载的本地文件,单击“确认”。界面回放本地文件。
创建数据集 平台支持用户创建数据集,通过数据提取将原始数据提取合并,进行数据预览。根据数据来源不同,创建的方式不同。 数据集来源分类 数据集来源分如下类型: 本地:直接从本地计算机上传数据集。 需提前准备文件保存至本地,且需满足如下条件: 仅支持上传扩展名为png、jpg、jpe
merge匝道合流 用途:创建merge高速匝道合流的静态场景(地图) 参数:参数如下表 表1 merge参数 Parameter Type Mandatory Description lane_width length yes 每个车道宽度。 left_lane_num int
回收站 Octopus平台支持用户删除数据包,执行删除操作的数据包将暂存回收站,等待用户可根据项目情况及时恢复或永久删除。具体操作参考如下: 在左侧菜单栏中,选择“数据资产 > 源数据包”。 在“数据包”页签,选择指定数据包操作栏内的“更多 > 删除”,根据界面提示删除数据包,删除后的数据包将放入回收站。
数据集管理 数据集建成后,在“数据集”列表,可对数据集进行以下操作。 表1 数据集列表相关操作 任务 操作步骤 查找数据集 在搜索输入框中输入搜索条件,按回车键即可查询。 查看数据集详情 在“数据集”列表,单击目标数据集名称,查看数据详情、数据预览、待发布区、版本管理和子集管理,详情请参考数据集详情。
场景挖掘作业(数据标记) 作业输入输出规范 用户完成自定义场景挖掘镜像上传后,在运行作业容器时,Octopus平台会向作业容器中注入以下环境变量: rosbag_path: 作为数据源的rosbag存放路径,例如/tmp/data/20220620.bag output_dir:
批次任务列表 一个项目可包含多个标注任务,标注平台支持批量创建任务。 添加批次任务 在左侧菜单栏中选择“标注服务 > 项目管理”。 选择“标注项目”页签,单击操作栏中的“添加批次任务”。 参考如下表格填写任务名称,备注和规范等信息。 表1 创建标注任务 参数 说明 任务名称 为当
预审核操作指导 预审核的方式是使用审核模型,生成预审核作业,对标注任务进行审核,可快速得到标注任务的质量指标,通过报告展示预审核结果。 在左侧菜单栏中选择“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称。 选择“批次任务列表”,单击批次任务前的。 单击“状态”为“
点云标注任务 点云标注任务是指根据标注规范对点云图像中出现的车、人等标注物进行标注。点云距离单位默认为米。 绘制对象 单击点云标注任务,单击任意一帧,进入人工标注。 选择标注工具。 单击左侧工具栏“智能缩框标注”(快捷键B)。 选择标注类别。 标注下拉列表页选择一标注名,进入标注状态。
语音标注任务 语音标注任务是指对单段落语音或多段落进行语音标注,提供单段落和多段落语音标注模板工具,通过管理平台进行标签和属性的配置,支持智能语音交互场景下每一个细分环境的标注,也支持整个交互闭环的整体标注。支持讲话人属性(性别、角色等)配置,支持意图识别、问答标注和设备状态标注
评分方案介绍 Octopus评测指标共有30多项大类指标,当规控算法未通过某些评测指标后,评测分数应能反映算法的性能表现。 本设计根据指标的重要程度将其分为三大类: 主要指标(以下简称A类)。 次要指标(以下简称B类)。 未定义重要度指标(以下简称C类)。 本设计提供如下三种内置的评分方案:
多模态检索 多模态检索通过大模型算法,对用户视频库进行特征提取,再通过多模态视频检索功能,检索出满足文本或者视频搜索条件的视频片段。 视频库配置 当前一个用户只支持配置一个视频库。 在服务控制台“总览 > 我的模型”区域,开通“多模态检索”服务。 在左侧菜单栏中单击“智驾模型服务
信号查看器 评测任务运行过程中,将一些衡量自动驾驶质量的关键指标,如速度、加速度等数据在仿真场景中变化量绘制成图表,便于用户直观考量规控算法的控制质量。用户也可将业务所需关注的数据集合成新的图表,对比查看。 查看器一次只支持载入5个任务场景,页面最多支持5个框图展示,一个框图最多支持10条信息选择。
制作ModelArts集群训练镜像 制作训练镜像 八爪鱼训练镜像使用ma-user用户运行,用户需保证镜像内已创建ma-user用户,且训练过程中使用到的python环境或其他依赖对ma-user具有权限。本地镜像构建完成后,需要将镜像上传到八爪鱼平台镜像仓库。 如果使用dock
制作CCE集群训练镜像 Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件,请确保基础镜像内包含上述软件且能通过PATH找到。 一般情况下,训练与评测定义为同一个引擎,主要包括算法或评测脚本运行所需要的基本依赖环境。用户可使用命令行模式或Dockerfile模式进行构建。
开通Octopus服务概述 自动驾驶云服务(Octopus)是由数据资产、数据合规、数据处理、标注服务、训练服务、仿真服务、智驾模型服务、公共配置管理组成。在使用各模块服务之前,需要先购买、开通相应服务。购买、开通服务会根据实际开通情况收取一定的费用,具体收费标准可以参考计费项。
预标注模型文件 预标注模型完成对数据的推理,并将推理结果按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的推理结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件。除此之外,还可包含一些
Resim作业(回放仿真) 作业输入输出规范 运行resim容器时,Octopus平台向容器中注入以下环境变量: rosbag_path: 作为输入的rosbag存放路径,例如/tmp/data/20220620.bag output_dir: resim作业的运行结果输出的目录,例如/tmp/output