检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
分布式训练任务 八爪鱼自动驾驶平台的多机分布式训练功能可以帮助用户加快模型训练速度,提高训练效率,并支持更大规模的深度学习任务。通过多机分布式训练,用户可以将训练任务分配到多台计算机或服务器上并行进行,充分利用硬件资源,加快模型收敛速度,提高训练效果。平台支持多种深度学习框架,如Te
择正确的标注类别绘制。 图2 修改标注物 标注车道线。 打开强度屏,辅助标注车道线。 图3 辅助标注车道线 快捷键使用说明 Octopus平台提供快捷键使用,用户可以利用快捷键快速完成标注,提高标注效率。 表1 快捷键使用说明 快捷键 功能 1 多边形绘制。 2 矩形绘制。 3 画笔绘制。
CCE集群 Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件,请确保基础镜像内包含上述软件且能通过PATH找到。 一般情况下,训练与评测定义为同一个引擎,主要包括算法或评测脚本运行所需要的基本依赖环境。用户可使用命令行模式或Dockerfile模式进
车辆管理 平台支持配置车队、车辆,以及两者的所属关系。 创建车队 在左侧菜单栏中,单击“数据资产 > 标定管理”。 选择“车辆管理”页签,单击“车队管理 > 新建车队”,填写车队名称和描述信息。 图1 新建车队 车队名称:车队展示名称。 描述:简要描述车队信息。 单击“确定”。
项目参与人数:标注员认领任务后,进行标注并保存任务进度,被平台视为参与该项目。同样,审核员认领审核任务进行审核并保存任务进度,被平台视为参与该项目。平台统计参与项目的标注员和审核员人数,并绘制成图表。 图5 项目参与人数 平均标注效率:标注平台实时统计项目标注速度变化情况,支持按帧数、框数或对象数查看。
算法文件说明 用户可将本地算法文件包上传到Octopus平台,算法文件包需要满足一定要求,请详细阅读本节,有助于用户快速完成算法开发。 算法文件基本要求 算法文件目录结构可参考如下,需要包括启动文件“xxx.py”(启动文件名可自定义),以及一些必要的训练文件。 启动文件(必选)
内置场景挖掘规则 内置场景挖掘算法都是基于规则进行片段挖掘。平台支持的内置场景挖掘规则如下: 道路---道路环境---高速 检验规格: 包含高精地图信息 主车行驶区域road级别type为motorway 道路---道路环境---城市快速路 检验规格: 包含高精地图信息 主车行驶
目。未分配到标注项目的团队不能查看该标注项目信息,保证标注任务的私密性及安全性。 前提条件 用户已开通账号。 管理员已添加用户,并分配标注平台完全控制权限。添加用户操作请参考用户管理。 创建团队 在左侧菜单栏中单击“标注服务 > 团队用户 > 团队管理”。 单击“创建团队”,填写团队信息。
批次任务列表 一个项目可包含多个标注任务,标注平台支持批量创建任务。 前提条件 项目创建成功。 添加批次任务 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击操作栏中的“添加批次任务”,填写任务信息。 图1 添加批次任务 任务名称:由“项目需求方-项目类
log:Octopus平台提供的前置数据的准备日志。 compile-{id}-sidecar.log:Octopus平台提供的任务流程控制日志,包括日志同步、结果上传。 octopus-compile-{id}-supplemental.logs: Octopus平台任务异常退出或停
描述:简要描述任务信息。不得包含“@^\#$%&*<>'|"/”,不得超过256个字符。 资源规格:当前项目中可用的资源规格,资源规格需要平台管理员在纳管模型编译用途的任务作业集群后创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 选择镜像。
作业总览”页签,单击“创建作业”。 完成创建作业任务信息。 图1 创建作业 处理算子:根据需要选择脱敏算子。 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 环境变量:配置算子的环境变量。允许添加的环境变量个数不超过10个。
数据包的查看,回放等功能。 数据场景:平台处理完原始采集数据后,平台支持内置和自定义场景挖掘算法,可自动提取对应场景行为的片段,展示在此模块中。 数据集:支持数据集多版本管理和统计。同时支持用户将本地符合平台规范的数据集导入平台,以及将平台上的数据集导出到自有OBS桶中。 数据缓
单击标签后的或搜索框后的“新增标签”,输入标签名称。 修改标签 单击标签后的,可对标签的名称进行修改。 删除标签 单击标签后的,可对标签进行删除。 说明: 平台预置场景标签暂不支持编辑、删除。 父主题: 标签管理
地图管理 在地图管理中上传的高精地图数据,可用于数据回放、仿真场景等。平台支持OpenDRIVE格式的地图文件。 上传地图数据包 在左侧菜单栏中,单击“数据资产 > 地图管理”。 单击界面右侧“上传”。 图1 上传地图数据包 添加文件:选择本地“.xodr”格式文件,支持上传不超过20M的文件。
另外,对于用户自研的评测算法的评测结果,也可以按照eva.proto,序列化成pb文件保存起来,这样Octopus的仿真平台前端能够展示用户自研评测算法的评测结果。 eva.proto的关键字段解释 在利用Octopus仿真平台进行批量仿真时,每个场景都会有一个评测结果,单个场景的评测结果全部保存在如数据类图所示的Evaluation类中。
用户管理 Octopus标注服务提供用户管理,对所有团队下普通用户进行纳管。 前提条件 用户已开通账号并创建子账号。 管理员已添加用户,并分配标注平台完全控制权限。添加用户操作请参考添加用户。 新增人员 在左侧菜单栏中单击“标注服务 > 团队用户 > 用户管理”。 单击“新增人员”,填写人员信息。
选择“作业总览”页签,单击“创建作业”。 图1 创建作业 处理算子:根据需要选择回放仿真算子。 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 数据类型:选择“数据包”。 选择数据:选择需要操作的数据包中的数据。
说明 VehicleInfo 车辆信息 消息格式中部分参数为必选,如使用该数据类型,则不可缺少该参数字段,否则会导致数据上传Octopus平台失败。 /*********************************** content: Octopus 输入数据格式
人工标注操作指导 本节主要介绍Octopus标注平台的标注界面操作(以图片和3D点云为例),标注任务的详细操作指导请参考标注样例。语言标注任务的详情操作指导请参考语音标注任务。文本标注任务的详情操作指导请参考文本标注任务。 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称。