检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据资产简介 在自动驾驶产品的开发过程中,海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能,供后续服务进行统一使用。数据服务开发流程如下: 图1 数据服务开发流程 地图管理:支持上传高精地图数据,可用于数据回放、仿真场景等功能。
调用说明 Octopus自动驾驶云服务提供了REST(Representational State Transfer)风格API,支持您通过HTTPS请求调用,调用方法请参见如何调用API。 调用API时,需要用户网络可以访问公网。 同时Octopus自动驾驶云服务还提供多种编程
认证鉴权,调用API接口认证鉴权支持Token认证和AK/SK认证两种方式。 访问控制 Octopus作为一个完备的自动驾驶工具链,支持用户对其进行细粒度的权限配置,以达到精细化资源、权限管理之目的。为了支持客户对Octopus的权限做精细化控制,提供了IAM权限控制方面的能力来支撑。
检索出满足文本或者视频搜索条件的视频片段。 视频库配置 当前一个用户只支持配置一个视频库。 在服务控制台“总览 > 我的模型”区域,开通“多模态检索”服务。 在左侧菜单栏中单击“智驾模型服务 > 多模态检索”。 单击“视频库配置”,输入基本信息。 名称:只能包含数字、英文、中文、
个人数据说明 Octopus自动驾驶服务平台在自动驾驶开发的过程中,在以下场景中需要您同意授权我们收集和使用您的内容数据,其中可能包括个人信息或个人敏感信息,对于这部分数据您有义务根据所适用国家的法律制定必要的用户隐私政策并采取足够的措施以确保用户的个人数据受到充分的保护。 表1
您的用户角色被冻结,无权访问该资源 请联系华为自动驾驶云服务技术支持团队 403 octopus.000114 Iam role is restricted, permission is denied 您的用户角色被受限,无权访问该资源 请联系华为自动驾驶云服务技术支持团队 403 octopus
车辆管理 平台支持配置车队、车辆,以及两者的所属关系。 在左侧菜单栏中,选择“数据资产 > 标定管理”。 进入“车辆管理”页签创建车队和车辆信息。 创建车队。 单击“车队管理”进入车队管理页面。 单击“新建车队”,填写车队名称和描述信息,单击“确认”。 车队创建完成后可以管理车队信息。
智驾模型 智驾模型微调后,需要对模型进行评测,并把模型部署到环境上进行推理,方便用户使用自己的数据训练得到专属模型进行推理,及比对训练效果。 智驾模型列表中展示服务内置的初始模型和用户进行模型微调后的迭代模型。 图1 智驾模型列表 智驾模型列表相关操作 智驾模型列表可以进行以下操作。
智驾模型简介 通过与AI模型、大模型的结合,提供高精度自动标注能力,大幅度降低传统人工标注数据真值的成本。提供场景数据集生成能力,帮助自动驾驶模型训练快速扩充数据集,低成本获取难例数据集。提供多模态场景理解和检索能力,帮助客户在海量样本库快速、智能的分类和检索。 智驾模型授权操作步骤
处理算子:根据需要选择脱敏算子。 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 环境变量:配置算子的环境变量。允许添加的环境变量个数不超过10个。 Key:只能由英文、数字、和特殊符号(
服务、扩展资源、模型,允许访问、修改、删除其中的数据,不允许创建数据。 保留期到期后,如果服务资源仍未续费,那么服务资源以及其中的数据将被自动删除,无法恢复。 图1 包年/包月资源生命周期 父主题: 计费说明
如果选择2个计算节点运行任务,则可选择查看单个节点资源占用情况。 资源占用情况功能模块,需要用户在制作自定义镜像时安装psutil与pynvml,参考命令:pip install psutil pynvml 如果未安装psutil与pynvml,则页面无法显示资源使用状况。 父主题: 编译管理
当data_id字段的取值为数据仓库id时,本结构体配置数据仓库输入数据筛选条件 warehouse_id 否 String 输出到数据仓库的id。当算子类型为数据标记、数据集、数据图表和回放仿真时必填 envs 否 Array of JobEnv objects 环境变量配置,最多十组 data_source
资产识别与管理 资产识别 用户在数据资产包括用户上传的数据集以及用户提供的一些个人信息。 数据资产包括但不限于文本、图形、音频、视频、照片、图像、代码、算法、模型等。 资产管理 对于用户上传至Octopus的资产,Octopus会做统一的保存管理。 对于文件类型的资产,Octop
回放仿真 任务管理 作业队列 父主题: 数据处理
通用存储 通用存储 自定义属性 父主题: 数据资产
项目管理 标注项目 批次任务 批次子任务 所有任务 任务队列 父主题: 标注服务
任务队列 任务队列页面展示在训练服务创建的所有类型任务,包括任务的名称、类型、资源规格、实例数、优先级、工作空间、创建者、创建时间等信息。同时支持跳转至指定任务详情页和修改任务的优先级。 训练服务的各类型任务在提交创建之后,都将进入对应集群的任务队列等待调度器统一调度。调度器默认
传感器标定 标定数据记录车辆本身以及车辆上传感器的配置信息,一个标定项对应一个传感器标定文件。Octopus标定文件需满足标准,平台会对上传的每个标定文件名、格式和类型做检查。 本地编写标定文件。 当前支持车架配置以及传感器标定信息配置:车架配置、相机以及激光雷达。 以创建激光雷达类型传
Octopus开发基本流程? Octopus是一站式自动驾驶开发平台,从数据收集上云,到自动化处理数据,自动或手动标注数据,创建并增量更新数据集,并将数据集用于模型训练,以及基于特定场景的在线仿真,用户都可以在Octopus平台上完成。 图1 Octopus开发流程 采集数据 指