检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
上传数据格式 在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速的完成数据收集以及数据格式转换。 上传数据格式:Rosbag包+与数据包同名的yaml文件,单包上传大小小于100G。 转换后数据格式:OpenData格式(内必含O
资产识别与管理 资产识别 用户在数据资产包括用户上传的数据集以及用户提供的一些个人信息。 数据资产包括但不限于文本、图形、音频、视频、照片、图像、代码、算法、模型等。 资产管理 对于用户上传至Octopus的资产,Octopus会做统一的保存管理。 对于文件类型的资产,Octopus会将资产保存在Octopus官方的OBS桶内。
BS桶,然后在OBS桶中创建文件夹用于存放数据。 图1 对象存储服务OBS 操作步骤 登录OBS管理控制台,在桶列表页面右上角单击“创建桶”,创建OBS桶。例如,创建名称为“xxxx”的OBS桶。 创建桶的区域需要与Octopus云服务所在的区域一致。如何查看OBS桶与Octop
提示“上传的AK/SK不可用”,如何解决? 问题分析 AK与SK是用户访问OBS时需要使用的密钥对,AK与SK是一一对应,且一个AK唯一对应一个用户。如提示不可用,可能是由于账号欠费或AK与SK不正确等原因。 解决方案 使用当前账号登录OBS管理控制台,确认当前账号是否能访问OBS。
上传数据格式 在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速地完成数据收集以及数据格式转换。 上传数据格式:单包上传大小小于100G。 转换后数据格式:OpenData格式。 使用场景 Octopus平台接收Rosbag格式数
上传数据格式 在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速地完成数据收集以及数据格式转换。 上传数据格式:单包上传大小小于100G。 转换后数据格式:OpenData格式。 使用场景 Octopus平台接收Rosbag格式数
在地图管理中上传的高精地图数据,可用于数据回放、仿真场景等。平台支持OpenDRIVE格式的地图文件。 上传地图数据包 在左侧菜单栏中,单击“数据资产 > 地图管理”。 单击界面右侧“上传”。 图1 上传地图数据包 添加文件:选择本地“.xodr”格式文件,支持上传不超过20M的文件。
镜像运行时,会向运行环境注入部分默认文件配置: 表1 环境变量说明 任务名称 文件名 环境变量 数据集任务 数据集待筛选数据目录 OCTPS_DATASET_DIR 数据集筛选结果数据目录 TARGET_RESULT_DIR="/tmp/…/result/data" 数据集日志文件目录 TARGET
格式:当前支持标准“Octopus格式”。 上传标定文件:根据提示,将车辆和传感器信息标定文件,添加到对应标定类型。一次可以添加多个,标定文件不得超过平台限制的最大数量。每上传一个标定文件,对应一个标定项。 图2 添加文件 请确保上传标定项中标定名称不重名,且文件内容正确,长度不可超过64个字符,否则将上传失败。 创建标定项。
不得超过256个字符。 单击“初始化”,完成脚本的初始化过程。 上传文件 将本地脚本文件夹拖入框中,或单击此处选择本地文件夹。 图2 上传文件 文件夹选择完毕后,单击“上传”。 上传中刷新或关闭浏览器会导致文件上传异常,请谨慎操作! 查看脚本详情 单击脚本名称,进入该脚本的详情页面。
如何查看Octopus与OBS桶是否在同一区域? 在使用Octopus各功能时,如创建训练作业、创建数据集等,涉及到需要指定OBS目录时,都需要保证此OBS桶与Octopus在同一区域。 查看OBS桶与Octopus是否在同一区域 查看创建的OBS桶所在区域。 登录OBS管理控制台。 进
n.yaml Octopus平台对Octopus OpenData数据包内文件大小限制如下: “.yaml”文件小于10kb。 “.jpg”文件小于2MB。 “.pcd”文件小于10MB。 “.pb”文件小于50MB。 MP4命名大小不可超过128位,不可有特殊字符。MP4的时间需要和Rosbag包中的时间匹配。
n.yaml Octopus平台对Octopus OpenData数据包内文件大小限制如下: “.yaml”文件小于10kb。 “.jpg”文件小于2MB。 “.pcd”文件小于10MB。 “.pb”文件小于50MB。 MP4命名大小不可超过128位,不可有特殊字符。MP4的时间需要和Rosbag包中的时间匹配。
单击右上角的“添加文件”。 完成文件上传信息。 目标检测 图1 文件上传 预标注功能:此处选择“目标检测”。 添加文件:上传本地点云文件。只能选择PCD点云文件,文件大小不能超过7MB。 目标分割 图2 文件上传 预标注功能:此处选择“目标分割”。 添加文件:上传本地点云文件。只能选择PCD点云文件,文件大小不能超过2MB。
yaml”配置文件说明 数据包中必须含有“Octopus_data_collection.yaml”配置文件,且配置文件中采集时间、车辆名称、ego_tf关键字为必填项,各类型传感器的名字必须和文件夹名称一致,格式也必须与规范相匹配,否则会导致数据上传失败。 配置文件,主要包括车辆
单击“初始化”,完成算法的初始化过程。 上传文件 将本地算法文件夹拖入框中,或单击此处选择本地文件夹。算法管理会将该文件下的所有子文件上传。 图5 上传文件 文件夹选择完毕后,单击“上传”,算法状态变为“创建中”。 上传中刷新或关闭浏览器会导致文件上传中断,请谨慎操作! 算法上传成功后,状态变为“创建成功”。
是 Boolean 文件状态。完成文件上传状态为true,未完成文件上传状态为false。 filename 是 String 文件名。 最大长度:255 表4 post 参数 是否必选 参数类型 描述 url 否 String POST预签链接信息,用于上传文件。 fields 否
选择“标注项目”页签,单击项目名称,进入项目内任务列表。 选择“规范管理”页签,单击“添加规范”,填写任务信息。 图1 添加规范 上传文件:规范文件,文件格式为PDF。 单击“确认”,上传成功后列表显示规范文件。 规范管理相关操作 在“规范管理”列表,还可以进行以下操作。 表1 规范管理相关操作 任务 操作步骤
RUN_FAILED(运行异常) FINISHED(已完成) STOPPED(已停止) LAUNCHING(启动中) UPLOADING(上传中) UPLOAD_FAILED(上传失败) output_type String 输出类型 枚举值: DATA_MARK(数据标记) OPEN_DATA(数据回放)
Octopus各环节与OBS的关系 功能 子任务 Octopus与OBS的关系 数据资产 地图管理 高精地图上传后存储在OBS中。 标定管理 传感器标定上传的标定文件存储在OBS中。 数据场景 场景挖掘后切出的rosbag片段存储在OBS中。 数据集 数据集存储在OBS中。 数据集的标注信息存储在OBS中。