检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
开通合规脱敏服务 在使用数据合规脱敏能力之前,需先开通合规脱敏服务。合规脱敏支持人脸,车牌,点云,GNSS,高程脱敏能力。开通合规脱敏服务后,会根据处理脱敏数据量按需计费,您可以在费用中心查询费用账单。 开通服务 登录Octopus服务平台,在左侧菜单栏中单击“总览”。 单击按需服务区域,合规脱敏产品操作列的“开通服务”。
认证证书 合规证书 华为云服务及平台通过了多项国内外权威机构(ISO/SOC/PCI等)的安全合规认证,用户可自行申请下载合规资质证书。 图1 合规证书下载 资源中心 华为云还提供以下资源来帮助用户满足合规性要求,具体请查看资源中心。 图2 资源中心 父主题: 安全
Octopus自动驾驶云服务所提供的接口均为自研接口。 通过Octopus自动驾驶云服务自研接口,您可以使用Octopus自动驾驶云服务公共服务、数据资产、数据处理和仿真服务等功能。 表1 API概览 类型 说明 镜像仓库 包括获取镜像仓库列表、创建镜像仓库、修改镜像仓库、删除镜像仓库的接口。 镜像版本
数据集的标注信息存储在OBS中。 模型管理 模型文件存储在OBS中。 通用存储 支持数据导出存储在OBS中。 数据处理 数据批导 支持导入OBS存储数据,支持实时扫描数据在OBS客户端操作。 数据处理 数据处理后的结果存储在OBS中。 标注服务 项目管理 标注的图片、点云数据存储在OBS中。 标注信息数据、标注规范存储在OBS中。
为子用户共同使用自动驾驶云服务的情况。请确保您的子用户是可控和可信任的。 计算资源:您在自动驾驶云服务中订购的通用处理节点、AI处理节点。 容器化处理作业:数据处理任务、标注任务、训练任务、推理任务、并行仿真、场景泛化、智驾模型训练、智驾模型推理等。 父主题: 安全
Octopus自动驾驶云服务提供了REST(Representational State Transfer)风格API,支持您通过HTTPS请求调用,调用方法请参见如何调用API。 调用API时,需要用户网络可以访问公网。 同时Octopus自动驾驶云服务还提供多种编程语言的SDK供您使用,SDK的使用方法请参见SDK概述。
由于请求的实体过大,服务器无法处理,因此拒绝请求。为防止客户端的连续请求,服务器可能会关闭连接。如果只是服务器暂时无法处理,则会包含一个Retry-After的响应信息。 414 Request-URI Too Large 请求的URI过长(URI通常为网址),服务器无法处理。 415 Unsupported
基本概念 账号 用户注册华为云时的账号,账号对其所拥有的资源及云服务具有完全的访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建用户并使用他们进行日常管理工作。 用户 由账号在IAM中创建的用户,是云
准备工作 已注册华为账号并开通华为云,且在使用Octopus前检查账号状态,账号不能处于欠费或冻结状态。 当前账号已完成访问授权的配置。华为云账号已满足要求,如果需要进行精细的权限管理,请参考创建用户并授权使用服务。 已完成八爪鱼自动驾驶云服务公测申请。如未完成,请参考申请公测。
开通Octopus服务概述 自动驾驶云服务(Octopus)是由数据资产、数据合规、数据处理、标注服务、训练服务、仿真服务、智驾模型服务、公共配置管理组成。在使用各模块服务之前,需要先购买、开通相应服务。购买、开通服务会根据实际开通情况收取一定的费用,具体收费标准可以参考计费项。
购买“同时在线用户数扩容包” 单击“下一步”,按需选择存储扩容包、通用处理节点和AI处理节点,此处以购买“自动驾驶数据管理缓存扩容包”和“octopus计算型CPU(16u32g)专属实例”为例。 图3 购买扩容包和通用处理节点 单击“下一步:确认配置”,并勾选“我已阅读并同意《八爪鱼自动驾驶云服务声明》”。
故障恢复 Octopus全球基础设施围绕华为云区域和可用区构建。华为云区域提供多个在物理上独立且隔离的可用区,这些可用区通过延迟低、吞吐量高且冗余性高的网络连接在一起。利用可用区,您可以设计和操作在可用区之间无中断地自动实现故障转移的应用程序和数据库。与传统的单个或多个数据中心基
新建算子 数据处理 数据处理可对自动驾驶过程中采集到的数据进行处理、解析,处理的结果可以用于回访定位问题,并可根据不同功能的算子生成不同的数据处理作业。数据处理操作引导如下: 数据批导:创建数据导入任务,收集采集车辆原始数据。 数据处理:支持根据自定义数据服务算子,对数据包进行处理,创建不同类型的作业。
Octopus支持定期更新或修补OS、应用程序证书、漏洞和配置。建议用户定期更新账户密码。 镜像更新升级 Octopus包含数据资产、数据处理、标注服务、训练服务、仿真服务等功能模块,各模块采用统一的流程提供基础镜像。这些镜像会不定期更新升级,修复已知漏洞。 密码更新 建议定期更
创建算子 基于您的业务数据,您可以在Octopus中创建数据处理的算子。 创建算子 数据批导 向Octopus平台导入原始数据包。 批导数据 数据处理 数据导入后,根据不同用途,选择不同算子,对数据包进行数据处理。 处理数据 标注数据 设置团队 Octopus标注服务提供团队管理
据。 上传数据 原始数据采集完毕后,在平台上创建数据收集任务,通过多种方式上传数据文件至Octopus平台。 数据处理 通过用户自定义算子对Rosbag数据包进行处理,最终将原始数据结构化,解析出各种不同传感器详细数据,如摄像头录制的图像数据、雷达的点云数据、车辆行驶轨迹等。生成的图片可以直接用于标注。
算法的数据。 处理每帧数据,不断更新评测结果。 仿真结束时,将最后一帧的评测结果作为最终的评测结果,通过EVA_PATH环境变量获取评测pb路径,经评测结果写入到评测pb文件中。 延时评测 图2 延时评测 如上图所示,延时评测以仿真pb文件作为输入,进行评测逻辑处理后,将评测结果写成评测pb。
模板管理 在进行自动驾驶模型训练过程中需要大量有标签的图片或视频数据,因此在模型训练之前需要对处理完的数据进行各类标注,进行场景识别。Octopus提供预标注功能,支持部分预标注模型,能够节省70%的人力成本。也提供人工标注功能,用户可以针对未标注数据在线手动标注或预标注后人工确
详情”,查看订单详情。在订单详情页面,选择数据包创建脱敏作业,对数据包进行脱敏操作。 订单推送 订单推送会将数据包推送到数据服务,您可以到“ 数据处理 > 数据批导”中查看导入任务进度。 查询订单号 在“数据合规”订单列表页面,在搜索输入框中输入搜索条件,按回车键即可查询订单号。 创建脱敏作业
在自动驾驶产品的开发过程中,海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能,供后续服务进行统一使用。数据服务开发流程如下: 图1 数据服务开发流程 地图管理:支持上传高精地图数据,可用于数据回放、仿真场景等功能。