检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
上传数据格式 在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速地完成数据收集以及数据格式转换。 上传数据格式:单包上传大小小于200GB。 转换后数据格式:OpenData格式。 使用场景 Octopus平台接收数据包(数据包至少需在一层文件夹内
功能总览 功能总览 全部 功能架构 数据资产 数据合规 数据处理 标注服务 训练服务 仿真服务 智驾模型服务 镜像仓库 运维配置 工作空间 功能架构 自动驾驶云服务(Octopus)是一个一站式的开发平台,能够支撑开发者从数据收集到仿真应用的全流程开发过程。整体由数据资产、数据服务
数据总览 在数据总览页面可查看平台数据服务的统计数据,帮助用户快速了解各项数据关键指标和业务的健康情况。 进入总览数据页面: 登录Octopus服务平台,在左侧菜单栏中单击“数据资产 > 数据总览”。 图1 数据总览 表1 总览页面说明 序号 区域名称 说明 1 采集数据统计 平台数据量的统计信息
创建项目 Octopus标注平台标注任务以项目形式进行管理,平台管理员根据业务的需求方及不同标注任务类型创建项目。项目内包含多个同类型的标注任务,可根据业务需要在项目内追加任务。平台管理员可将标注项目分配给标注团队完成。 项目内包含多个标注任务,在创建项目时需绑定标注团队,指定团队完成项目内的标注任务
添加批次任务 在左侧菜单栏中选择“标注服务 > 项目管理”。 选择“标注项目”页签,单击操作栏中的“添加批次任务”。 参考如下表格填写任务名称,备注和规范等信息。 表1 创建标注任务 参数 说明 任务名称 为当前项目名称的“项目需求方-项目类型”组成,不可修改。 备注 备注信息可自定义
制作镜像(标注) Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件,请确保基础镜像内包含上述软件且能通过PATH找到。 Dockerfile示例 环境变量使用说明 父主题: 镜像仓库
功能介绍 自动驾驶行业的关键开发工具对自动驾驶汽车开发和量产有着重要的推动作用。然而,自动驾驶面临许多问题,如海量的数据存储、模型迭代资源耗费、人工标注高成本、孤岛工具链等,开环验证和闭环仿真都很难快速迭代起来。为解决这个问题,Octopus自动驾驶云服务覆盖自动驾驶数据、模型、训练
数据导入 对象存储导入数据 把原始数据上传至平台前,可将数据包上传至对象存储中,从对象存储导入平台。操作步骤如下: 在左侧菜单栏中,选择“数据处理 > 数据批导”。 在“数据导入”页签单击“导入”,填写具体信息。 选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子目录。
与datahub对接的算法镜像制作 图1 算法镜像 如上图所示,算法与仿真平台datahub通过grpc连接,通过接收osi数据作为输入,并将算法内部信号输出到datahub。 仿真平台可以生成仿真的osi和算法pb,用于3d回放展示和算法的白盒化评测。 具体grpc连接datahub
转换后数据格式 Octopus平台支持将上传的Rosbag格式转换为OpenData格式。 数据类型 Octopus平台对数据有以下要求: 数据类型:包括各传感器数据、车辆数据、目标推理数据、自车坐标姿态以及标签记录数据等。 数据格式:Octopus OpenData格式。其中相机采集数据文件后缀为
转换后数据格式 Octopus平台支持将上传的Rosbag格式转换为OpenData格式。 数据类型 Octopus平台对数据有以下要求: 数据类型:包括各传感器数据、车辆数据、目标推理数据、自车坐标姿态以及标签记录数据等。 数据格式:Octopus OpenData格式。其中相机采集数据文件后缀为
数据提取作业(数据集) 作业输入输出规范 Input 平台会以环境变量的形式提供以下参数: rosbag_path: rosbag路径,以.bag结尾。 output_dir:最终输出数据集路径。 tmp_dir:供用户存储临时文件的目录。 task_content_json:人工打标需要的标签信息
管理项目 项目需绑定管理员所在团队。 团队管理员管理项目步骤与平台管理员一致。 详细步骤请参考项目管理。 父主题: 团队管理员
批次子任务 批次任务可以拆分为多个子任务,方便多人进行操作。 拆分批次任务 当样本数量庞大时,平台可对批次任务做拆分处理,具体步骤如下: 在左侧菜单栏中选择“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称,进入项目内任务列表。 选择“批次任务列表”页签,单击操作栏中的
批次任务列表 一个项目可包含多个标注任务,标注平台支持批量创建任务。 添加批次任务 在左侧菜单栏中选择“标注服务 > 项目管理”。 选择“标注项目”页签,单击操作栏中的“添加批次任务”。 参考如下表格填写任务名称,备注和规范等信息。 表1 创建标注任务 参数 说明 任务名称 为当前项目名称的
所有任务 平台管理员可在所有任务列表页查看所有项目中的子任务。 所有任务相关操作 在“所有任务”列表,还可以进行以下操作。 表1 所有任务相关操作 任务 操作步骤 查询任务 在搜索输入框中输入搜索条件,按回车键即可查询。 查看任务详情 单击任务名称,界面跳转至任务详情,可查看任务详情信息
算法文件说明 上传到Octopus平台的本地算法文件包需要满足Octopus平台要求,本章节介绍算法文件基本要求及相关环境变量说明。 算法文件基本要求 算法文件目录结构可参考如下,需要包括启动文件“xxx.py”(启动文件名可自定义),以及一些必要的训练文件。 启动文件(必选) 算法的启动文件
仿真器 进入、占用、释放仿真器 Octopus平台在线仿真模块为用户提供了在线仿真器。单击进入在线仿真器,用户进入机器后,机器显示红色按钮占用,用户退出在线仿真界面不会自动释放机器,会保持占用状态。机器图片的左上角会出现释放按钮,只有占用中的用户可以释放。 图1 仿真器 加载场景
标注服务简介 Octopus标注服务为标注团队提供标注平台管理员、团队管理员和标注任务操作人员(标注员/审核员/验收员)三类职能。三类职能对标注平台的操作权限不同,保证标注任务的数据安全。标注服务管理员根据不同标注任务创建标注团队,分配标注任务操作人员不同职能。创建标注项目,并在项目下创建标注模板及标注任务
批导数据 原始数据采集完毕之后,需要将原始数据转换为Octopus平台适用的数据格式,以便于快速完成数据处理。 创建数据导入任务 在左侧菜单栏中,选择“数据处理 > 数据批导”。 在“数据导入”页签单击“导入”,填写具体信息。 选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子目录