检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
务、自动驾驶训练云服务、自动驾驶仿真云服务、自动驾驶大模型云服务、配置管理服务,帮助车企以及研究所快速开发自动驾驶产品。 “一站式”是指自动驾驶产品开发的各个环节,包含数据资产、数据合规、数据处理、数据标注、增量数据集、模型训练、仿真测试等操作都可以在Octopus上完成,支持用
注云服务、自动驾驶训练云服务、自动驾驶仿真云服务、自动驾驶大模型云服务、配置管理服务,帮助车企以及研究所快速开发自动驾驶产品。 “一站式”是指自动驾驶产品开发的各个环节,包含数据资产、数据处理、数据标注、增量数据集、模型训练、仿真测试等操作都可以在Octopus上完成,支持用户从
根据不同角色分配不同标注任务。 标注流程 训练模型 训练算法 创建训练作业前需要先选择算法,可以使用Octopus内置的算法,也可以自定义算法。 训练算法 模型评测 在机器学习中,通常需要使用一定的方法和标准,来评测一个模型的预测精确度,用于衡量一个模型及其标注结果的可信度。自动驾驶领域的模型多用于目标检测,
场景挖掘 平台支持基于内置场景挖掘算法和场景识别大模型挖掘的能力,对数据包进行场景挖掘。具体操作步骤如下: 在左侧菜单栏中,单击“数据资产 > 源数据包”。 选择“数据包”页签,单击操作栏中的“详情”,进入数据包详情页。 单击数据包信息的“场景挖掘”,后台会自动进行内置场景挖掘。
只能由英文、数字和特殊符号(\/,.[]-_)组成 。长度不超过512个字符。 选择待编译模型版本。 图3 选择待编译模型版本 模型可以为训练任务产生的模型版本或者通过本地模型文件上传产生的模型版本。 以上信息填写无误,单击"创建"。编译任务创建成功。 父主题: 训练服务
环境变量:由算法携带,可修改参数值。 选择需要归档的模型仓库。 模型仓库需提前在“数据资产 > 模型管理”中创建成功。 图3 常规训练 常规训练:基于数据集和用户算法训练新模型。 图4 增量训练 增量训练:基于用户导入的模型或已完成训练模型版本(可通过${MODEL}获取该模型版本的文件路径)和新数据集使
特定物体。标注后的图片和点云图片可用于模型训练,高质量的标注数据有利于模型精准度提升,并持续迭代。 增量数据集 将标注后的数据根据数据类型、标注、标签等,建立不同种类的数据集,同时支持数据集增量更新,可针对性用于不同算法和模型的训练。 模型训练 基于平台上创建好的数据集,可对自定
4 按需服务 显示合规脱敏服务,支持开通合规脱敏服务。 5 模型微调 显示智驾模型微调服务,支持开通智驾模型微调服务。 6 我的模型 显示智驾模型服务中的2D预标注、2D图像生成、场景识别功能,支持开通我的模型和购买套餐包。 父主题: 购买开通Octopus服务
资产识别 用户在数据资产包括用户上传的数据集以及用户提供的一些个人信息。 数据资产包括但不限于文本、图形、音频、视频、照片、图像、代码、算法、模型等。 资产管理 对于用户上传至Octopus的资产,Octopus会做统一的保存管理。 对于文件类型的资产,Octopus会将资产保存在Octopus官方的OBS桶内。
查看集群纳管 运维配置提供集群纳管,由平台管理员账号进行管理和配置。集群提供多种节点的混合部署,基于高性能网络模型提供全方位、多场景、安全稳定的容器运行环境,平台可以将集群统一纳管,更方便查看节点资源使用量和修改节点用途,以及设置资源规格。其中,cce-user-job集群需强制
创建对象存储服务 Octopus云服务使用对象存储服务(Object Storage Service,简称OBS)进行数据存储以及模型的备份和快照,实现安全、高可靠和低成本的存储需求。因此,建议您在使用Octopus云服务之前先创建一个OBS桶,然后在OBS桶中创建文件夹用于存放数据。
对数据进行场景标记,用以场景识别并进行模型训练。 难例 难例是模型训练过程中,出错率很高的一部分样本。是数据经过自动标注后,未标注成功或者标注错误的数据,需要通过人工筛选得到。可以通过维护难例集,将这部分样本集中维护,最终重新用于训练,持续提升算法和模型精度。
publishDataset 创建模型仓库 octopus createModelRepository 创建模型版本 octopus createModelVersion 删除模型版本 octopus deleteModelVersion 删除模型仓库 octopus deleteModelRepository
提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 数据缓存 模型管理 Octopus平台支持上传符合平台规范的模型用于标注或训练任务。对智驾模型进行模型微调后,调优后的模型会自动保存到模型仓库中。 模型仓库 模型文件说明(标注) 模型文件说明(训练) 通用存储 在通用存储中平台支持通用存
表2 预审核任务相关操作 任务 操作步骤 查询预审核任务 在搜索输入框中输入搜索条件,按回车键即可查询任务。 查看模型 单击模型名称,界面跳转至模型详情,可查看模型。 查看任务日志 单击操作栏中的“日志”,可查看或下载日志详情。 删除任务 选择单个任务,单击操作栏的“删除”,删除单个任务。
传感器标定上传的标定文件存储在OBS中。 数据场景 场景挖掘后切出的rosbag片段存储在OBS中。 数据集 数据集存储在OBS中。 数据集的标注信息存储在OBS中。 模型管理 模型文件存储在OBS中。 通用存储 支持数据导出存储在OBS中。 数据处理 数据批导 支持导入OBS存储数据,支持实时扫描数据在OBS客户端操作。
按订单的实际购买时长计费。 按照订单的有效周期结算。 按照单次生成订单费用结算。 适用计费项 基础版、扩容资源 模型 模型 适用功能模块 数据服务、标注服务、训练服务、仿真服务、合规服务 智驾模型服务 智驾模型服务、合规服务 适用场景 适用于可预估资源使用周期的场景。推荐长期使用者购买。 适用于可预估
自有OBS桶中。 数据缓存:提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 模型管理:负责对模型仓库和模型版本进行各种操作,模型仓库可包含多个模型版本,支持上传符合平台规范的模型用于标注或训练任务。 通用存储:支持创建通用存储,用于数据存储。 父主题: 数据资产
集目录 模型存放目录 RESULT CCE: /tmp/result ModelArts: /home/ma-user/modelarts/result 训练产物的存放路径,产物输出到此路径后,在任务结束时。可在任务详情页的输出模型版本中浏览及执行各种操作。 增量训练模型目录 MODEL
删除工作空间 √ x 更详细的细粒度策略支持的授权项请参考《Octopus API参考》中“策略及授权项说明”章节。 智驾模型委托授权 图2 委托授权 在使用智驾模型服务模型微调和2D图像生成时,需要访问对象存储服务(OBS),因此需要用户委托Octopus平台访问OBS。 登录华为云账号,访问统一身份认证服务。