检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
模型仓库 模型仓库介绍 模型管理模块支持以模型仓库的方式对模型进行纳管和归档,每个模型仓库中又可以创建若干个模型版本,方便对同类模型统一管理。 模型包含镜像和文件两部分。其中镜像与模型仓库绑定,也就是说同一个模型仓库的版本共享一个镜像;文件存储在对象存储(OBS)中, 各个版本的文件一般不同。
数据缓存:提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 模型管理:负责对模型仓库和模型版本进行各种操作,模型仓库可包含多个模型版本,支持上传符合平台规范的模型用于标注或训练任务。 通用存储:支持创建通用存储,用于数据存储。 父主题: 数据资产
模型文件说明(标注) 模型文件可用于预标注任务、预审核任务。不同任务所需的模型文件要求不同。 预标注模型文件 预审核模型文件 父主题: 模型管理
模型管理 模型仓库 模型文件说明(标注) 模型文件说明(训练) 父主题: 数据资产
智驾模型简介 通过与AI模型、大模型的结合,提供高精度自动标注能力,大幅度降低传统人工标注数据真值的成本。提供场景数据集生成能力,帮助自动驾驶模型训练快速扩充数据集,低成本获取难例数据集。提供多模态场景理解和检索能力,帮助客户在海量样本库快速、智能的分类和检索。 智驾模型授权操作步骤
模型文件说明(训练) Octopus模型管理模块,支持用户上传模型,并将其用于模型评测、模型编译任务。如果需要将模型用于内置评测模板评测,除模型文件外,需另外包含推理启动文件: customer_inference.py 仅当需要使用内置评测指标计算时需要添加推理启动文件,文件名称可自定义,将该文件置于模型目录下。
数据资产 数据资产简介 数据总览 地图管理 标定管理 源数据包 数据场景 数据集 数据缓存 模型管理 通用存储
资产识别与管理 资产识别 用户在数据资产包括用户上传的数据集以及用户提供的一些个人信息。 数据资产包括但不限于文本、图形、音频、视频、照片、图像、代码、算法、模型等。 资产管理 对于用户上传至Octopus的资产,Octopus会做统一的保存管理。 对于文件类型的资产,Octop
自定义模型文件 自定义模型文件“xxx.pb”,需要通过编写自定义脚本加载并使用。自定义模型文件的存放位置及名称可自定义,可以将相关模型文件保存至子文件夹中,也可以保存至根目录下。 环境变量使用说明 模型推理所需的待标注数据集目录、预标注结果数据目录、标注物文件目录、模型文件目录
智驾模型管理 智驾模型 在线服务 父主题: 智驾模型服务
智驾模型 智驾模型微调后,需要对模型进行评测,并把模型部署到环境上进行推理,方便用户使用自己的数据训练得到专属模型进行推理,及比对训练效果。 智驾模型列表中展示服务内置的初始模型和用户进行模型微调后的迭代模型。 图1 智驾模型列表 智驾模型列表相关操作 智驾模型列表可以进行以下操作。
预审核模型文件 预审核模型完成对已标数据的审核,并将审核结果和审核所用的审核规则按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的审核结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件
模型评测 评测脚本 评测任务 评测对比 模型数据集支持 父主题: 训练服务
模型评测 创建评测脚本 创建评测任务 父主题: 训练服务
完成模型配置。 模型级别:可选择“初始模型”和“迭代模型”。“初始模型”为Octopus平台提供的内置模型,“迭代模型”是用户二次微调后的模型。 输入模型:选择需要进行微调的模型和版本。初始模型提供的内置模型如下: 表1 Octopus平台提供的内置模型 模型名称 说明 hw_model_3d_detection
数据场景 场景展示 标签管理 父主题: 数据资产
在数据总览页面可查看平台数据服务的统计数据,帮助用户快速了解各项数据关键指标和业务的健康情况。 进入总览数据页面: 登录Octopus服务平台,在左侧菜单栏中单击“数据资产 > 数据总览”。 图1 数据总览 表1 总览页面说明 序号 区域名称 说明 1 采集数据统计 平台数据量的统计信息,并图形化展现历史数据趋势。
数据场景依赖以下三个topic:ego_tf(主车定位)、 object_array_vision(目标感知)、vehicle(底盘)。 基于模型的场景挖掘依赖camera(相机)传感器。 自定义场景挖掘算法对topic无特殊要求,由客户算法自行定义。 前提条件 符合以下两种条件中的
标定管理 车辆管理 传感器标定 标定文件模板 父主题: 数据资产
确认待缓存数据集中是否存在未发布的数据。 在数据集列表(数据资产 > 数据集)中,单击数据集名称,查看“数据详情”页签的“待发布区”是否存在未发布的数据: 是:参考4发布数据,然后执行2。 否:执行2。 在数据集列表(数据资产 > 数据集)中,单击操作栏中的“缓存加速”。 单击“数据缓存”,在数据缓存界面查看缓存的数据。