检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据资产 数据资产简介 数据总览 地图管理 标定管理 源数据包 数据场景 数据集 数据缓存 模型管理 通用存储
数据资产简介 在自动驾驶产品的开发过程中,海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能,供后续服务进行统一使用。数据服务开发流程如下: 图1 数据服务开发流程 地图管理:支持上传高精地图数据,可用于数据回放、仿真场景等功能。
资产识别与管理 资产识别 用户在数据资产包括用户上传的数据集以及用户提供的一些个人信息。 数据资产包括但不限于文本、图形、音频、视频、照片、图像、代码、算法、模型等。 资产管理 对于用户上传至Octopus的资产,Octopus会做统一的保存管理。 对于文件类型的资产,Octop
标定管理 车辆管理 传感器标定 标定文件模板 父主题: 数据资产
模型管理 模型仓库 模型文件说明(标注) 模型文件说明(训练) 父主题: 数据资产
object_array_vision(目标感知)、vehicle(底盘)。自定义场景挖掘算法对topic无特殊要求,由客户算法自行定义。 场景展示 标签管理 父主题: 数据资产
单击“上传”。 在“地图管理”页面的列表中,可以查看新上传的地图包。 地图管理相关操作 表1 地图管理相关操作 任务 操作步骤 查看地图包详情 在“地图管理”页面,单击操作栏内的“详情”,用户可查看地图包详情。具体页面参考地图包详情。 删除地图包 在“地图管理”页面,单击操作栏内的“删除”,即可删除地图包。
本、新建模型版本和管理模型版本,详见在线编辑模型、新建版本、模型版本管理。当镜像仓库用途为智驾模型时,展示该模型所有可用版本的信息,如版本名称、描述、状态、创建时间、更新时间等信息,用户可以管理模型版本,详见模型版本管理。 图7 用途为训练、标注的模型版本管理 图8 用途为智驾模型的模型版本管理
模型文件说明(标注) 模型文件可用于预标注任务、预审核任务。不同任务所需的模型文件要求不同。 预标注模型文件 预审核模型文件 父主题: 模型管理
模型文件说明(训练) Octopus模型管理模块,支持用户上传模型,并将其用于模型评测、模型编译任务。如果需要将模型用于内置评测模板评测,除模型文件外,需另外包含推理启动文件: customer_inference.py 仅当需要使用内置评测指标计算时需要添加推理启动文件,文件名称可自定义,将该文件置于模型目录下。
源数据包 数据包格式 查看源数据包 场景挖掘 数据回放 回收站 父主题: 数据资产
在数据总览页面可查看平台数据服务的统计数据,帮助用户快速了解各项数据关键指标和业务的健康情况。 进入总览数据页面: 登录Octopus服务平台,在左侧菜单栏中单击“数据资产 > 数据总览”。 图1 数据总览 表1 总览页面说明 序号 区域名称 说明 1 采集数据统计 平台数据量的统计信息,并图形化展现历史数据趋势。
数据缓存 提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 在数据集列表(数据资产 > 数据集)中,单击操作栏中的“缓存加速”。 在数据缓存界面出现缓存的数据。 父主题: 数据资产
00915069 y: 1.34196 z: 1.38 timeshift_vel_veh: 0.000000000 父主题: 标定管理
车辆管理 平台支持配置车队、车辆,以及两者的所属关系。 创建车队 在左侧菜单栏中,单击“数据资产 > 标定管理”。 选择“车辆管理”页签,单击“车队管理 > 新建车队”,填写车队名称和描述信息。 图1 新建车队 车队名称:车队展示名称。 描述:简要描述车队信息。 单击“确定”。
配置项与传感器存在差异,参照示例模板,按照实际情况填写即可。 各类型标定文件模板可参考标定文件模板部分。 在左侧菜单栏中单击“数据资产 > 标定管理”。 选择“传感器标定”页签,单击“上传标定项”。 图1 上传标定项 格式:当前支持标准“Octopus格式”。 上传标定文件:根据
创建数据集 数据来源为数据集 数据来源为数据集子集 父主题: 数据集
数据集 创建数据集 数据集管理 导出任务 Octopus数据集格式说明 父主题: 数据资产
导出”,导出待发布区域的数据,具体请参考导出任务。 上传文件 本地数据集且状态为中断或初始化,单击“上传文件”上传文件。 版本管理。 图5 版本管理 表3 版本管理相关操作 功能 步骤 搜索版本 在搜索输入框中输入搜索条件,按回车键即可查询。 查看日志 单击操作栏的“日志”,界面跳转至
通用存储 通用存储 自定义属性 父主题: 数据资产