检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
详情”,查看订单详情。在订单详情页面,选择数据包创建脱敏作业,对数据包进行脱敏操作。 订单推送 订单推送会将数据包推送到数据服务,您可以到“ 数据处理 > 数据批导”中查看导入任务进度。 查询订单号 在“数据合规”订单列表页面,在搜索输入框中输入搜索条件,按回车键即可查询订单号。 创建脱敏作业
模板管理 在进行自动驾驶模型训练过程中需要大量有标签的图片或视频数据,因此在模型训练之前需要对处理完的数据进行各类标注,进行场景识别。Octopus提供预标注功能,支持部分预标注模型,能够节省70%的人力成本。也提供人工标注功能,用户可以针对未标注数据在线手动标注或预标注后人工确
常)时的时刻点用哪种形式存储起来。 其中PointType共有5种类型,参考PointType。 Points:是repeated float类型,保存每个子类指标发生特殊状态的具体时间点的值。 Stats_indices:是repeated ui32类型,表示该子指标关联的统计类数值列表。
创建作业 在左侧菜单栏中,单击“数据合规”。 选择“数据脱敏 > 作业总览”页签,单击“创建作业”。 完成创建作业任务信息。 图1 创建作业 处理算子:根据需要选择脱敏算子。 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50
据。 上传数据 原始数据采集完毕后,在平台上创建数据收集任务,通过多种方式上传数据文件至Octopus平台。 数据处理 通过用户自定义算子对Rosbag数据包进行处理,最终将原始数据结构化,解析出各种不同传感器详细数据,如摄像头录制的图像数据、雷达的点云数据、车辆行驶轨迹等。生成的图片可以直接用于标注。
申请公测 介绍用户如何对有公测活动的产品或者服务申请公测。 当前自动驾驶云服务仅支持专属区域“华北-汽车一”,如果您需要使用自动驾驶云服务,可以参考提交工单尝试申请专属区域“华北-汽车一”访问权限。 自动驾驶云服务在区域“华南-广州”提供了OpenAPI,您也可以通过调用API,
访问密钥ID(AK)和私有访问密钥(SK),在导入数据时,通过AK识别访问用户的身份,通过SK对请求数据进行签名验证,用于确保请求的机密性、完整性和请求者身份的正确性。如何获取访问密钥AK/SK? 输入的访问密钥和私有访问密钥需要具有OBS服务如下权限: obs:object:GetObject obs:object:PutObject
枚举值: OBS(对象存储) DES(数据递送) topic_types Array of strings 传感器类型 replay_job_status Integer 回放作业状态 枚举值: 1(未解析) 2(已完成) 3(解析失败) 4(未回放处理) 5(回放处理失败) processor_job_ids
除”。 确认后单击“确认删除”,删除后的数据包将放入回收站。 图1 删除数据包 查看数据包状态。 单击“回收站”,删除后的数据包状态为“待处理”,此状态下的数据包还可进行以下操作: 还原 :恢复该数据包,参考步骤3。 永久删除:该数据包及关联的任务将会被Octopus平台永久删除,参考步骤4。
自动驾驶云服务全流程开发 使用流程 准备工作 数据处理 标注服务 训练服务 仿真服务
数据资产简介 在自动驾驶产品的开发过程中,海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能,供后续服务进行统一使用。数据服务开发流程如下: 图1 数据服务开发流程 地图管理:支持上传高精地图数据,可用于数据回放、仿真场景等功能。
导入ID:单击导入ID,页面跳转至导入任务详情。 数据包详情 数据目录、数据类型、标定项ID、数据格式、数据量。 数据处理 可查看此数据包关联的数据处理作业,单击作业ID,可跳转至作业处理界面。 收集信息 车辆名称、标定ID、驾驶模式、采集站点、驾驶路线、采集时间、和总数据量以及各类传感器采集的数据量。
查看审计日志 在您开启了云审计服务后,系统会记录Octopus的相关操作,且控制台保存最近7天的操作记录。本节介绍如何在云审计服务管理控制台查看最近7天的操作记录。 操作步骤 登录云审计服务管理控制台。 在管理控制台左上角单击图标,选择区域。 在左侧导航栏中,单击“事件列表”,进入“事件列表”页面。
抽帧是将解压后的Rosbag数据,抽出单幅画面,生成图片数据或者视频数据。 自动驾驶汽车在进行测试时会产生大量数据,车企需要对这些数据高效处理与分析,因此在进行自动驾驶研究时需要对这些原始数据有选择性、针对性地进行提取和分析,抽帧便是一种筛选数据的方式。针对数据类型,Octopus将抽帧任务分为图片抽帧和点云抽帧。
数据场景 Octopus平台处理完原始采集数据后,平台支持内置和自定义场景挖掘算法,可自动提取对应场景行为的片段,展示在数据场景模块中。用户可将其生成单个仿真场景片段,为后续仿真开发做准备。 数据场景依赖以下三个topic:ego_tf(主车定位)、 object_array_v
Boolean 是否选择所有数据包 priority Integer 数据包处理任务优先级 opendata_processor_config DataProcessorConfig object 转opendata处理任务 desensitize_processor_config DataProcessorConfig
数据。 OBS简介 对象存储服务OBS是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力。对象存储服务OBS的基本组成是桶和对象。桶是OBS中存储对象的容器,每个桶都有自己的存储类别、访问权限、所属区域等属性,用户在互联网上通过桶的访问域名来定位桶。对象是OBS中数据存储的基本单位。
DataProcessorConfig object 转opendata处理任务 desensitize_processor_config 否 DataProcessorConfig object 脱敏处理任务 表4 DataProcessorConfig 参数 是否必选 参数类型
持到期前的重复购买。 合规服务依赖数据服务,在购买合规云服务-基础版前,需先购买数据云服务-基础版。 单击“下一步”,购买存储扩容包、通用处理节点和AI处理节点,请详见购买扩展资源包。 单击“下一步:确认配置”,并勾选“我已阅读并同意《八爪鱼自动驾驶云服务声明》”。 图3 确认配置
套餐包:一种预付费模式,即先付费再使用,您可以根据实际需求购买套餐包获取更多的优惠。 按需计费:一种后付费模式,即先使用再付费,按照实际使用次数、处理数据量进行结算。 表1 计费模式说明 计费模式 包年/包月 套餐包 按需计费 付费方式 预付费 预付费 后付费 计费周期 按订单的实际购买时长计费。