检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据批导简介 在使用平台进行自动驾驶开发时，首先需要用户把原始数据上传至Octopus平台，即数据上云。下文介绍了通过对象存储导入数据的方式，帮助用户把车载平台输出的数据上传至Octopus平台上。 对象存储导入数据：用户需先将数据包上传至对象存储桶（可自定义）中，再导入到Oct
数据资产简介 在自动驾驶产品的开发过程中，海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能，供后续服务进行统一使用。数据服务开发流程如下： 图1 数据服务开发流程 地图管理：支持上传高精地图数据，可用于数据回放、仿真场景等功能。
数据处理简介 数据处理可对自动驾驶过程中采集到的数据进行处理、解析，处理的结果可以用于回访定位问题，并可根据不同功能的算子生成不同的数据处理作业。数据处理操作引导如下： 数据批导：创建数据导入任务，收集采集车辆原始数据。 数据处理：支持根据自定义数据服务算子，对数据包进行处理，创建不同类型的作业。
数据总览 在数据总览页面可查看平台数据服务的统计数据，帮助用户快速了解各项数据关键指标和业务的健康情况。 进入总览数据页面： 登录Octopus服务平台，在左侧菜单栏中单击“数据资产 > 数据总览”。 图1 数据总览 表1 总览页面说明 序号 区域名称 说明 1 采集数据统计 平
数据导入 对象存储导入数据 把原始数据上传至平台前，可将数据包上传至对象存储中，从对象存储导入平台。操作步骤如下： 在左侧菜单栏中，选择“数据处理 > 数据批导”。 在“数据导入”页签单击“导入”，填写具体信息。 选择目标数据包所在的对象存储路径，平台将自动扫描该目录下所有子目录
“ 数据处理 > 数据批导”中查看导入任务进度。 查询订单号 在“数据合规”订单列表页面，在搜索输入框中输入搜索条件，按回车键即可查询订单号。 删除订单 选择操作栏中的“更多 > 删除”可删除订单。 创建脱敏作业 数据包上传成功后，可以选择指定的数据包创建脱敏作业。 在订单的“操作”列，选择“更多
数据合规简介 数据合规服务是自动驾驶云服务为用户提供数据硬盘递送、数据监管服务。 支持对上传合规服务的数据包进行脱敏处理，提供合规脱敏能力，支持将数据包中人脸、车牌、点云脱敏。 支持用户使用合规服务创建脱敏算子、下发脱敏任务。 在使用数据合规服务之前，需要先购买合规服务和数据服务。如何购买服务？
处理数据 在作业总览中平台支持创建数据标记，数据图表、数据回放、数据集等作业，数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 当选择数据集算子时，数据类型可支持选择通用存储。 创建作业 在左侧菜单栏中，单击“数据处理 > 数据处理”。
数据提取作业（数据集） 作业输入输出规范 Input 平台会以环境变量的形式提供以下参数： rosbag_path： rosbag路径，以.bag结尾。 output_dir：最终输出数据集路径。 tmp_dir：供用户存储临时文件的目录。 task_content_json：人
数据场景 场景展示 标签管理 父主题： 数据资产
批导数据 原始数据采集完毕之后，需要将原始数据转换成适合Octopus平台的数据格式，以便于更快速地完成数据处理。 创建数据导入任务 在左侧菜单栏中，单击“数据处理 > 数据批导”。 选择“数据导入”页签，单击“导入”。 选择“对象存储导入”页签，填写具体信息。 选择目标数据包所
数据缓存 用户购买自动驾驶数据管理缓存扩容包后，可使用数据缓存功能提供专用高速文件存储，加速训练和评测读取数据集的速度。需确保待缓存的数据集中的所有数据均已发布成功。 确认待缓存数据集中是否存在未发布的数据。 在数据集列表（数据资产 > 数据集）中，单击数据集名称，查看“数据详情
数据导入 获取导入任务列表 创建数据包导入任务 获取导入任务详情 删除导入任务 启动数据导入任务 父主题： API
缓存数据集 当缓存加速状态为“未缓存”、“缓存过期”、“缓存失败”时，单击操作栏中的“缓存加速”，可缓存数据集至“数据缓存”模块。 数据集详情 在“数据集”列表，单击数据集名称，进入数据集详情界面。 查看数据详情。 数据详情页签展示了数据集ID、名称、描述、数据来源、数据集类型等信息。
、UHD620的gpu 、16G内存 、100Mbps带宽。 查看数据回放 数据回放页面详细说明如下： 图1 数据回放详情页 表1 数据回放页面详细说明 序号 区域名称 说明 1 主车运行状态数据 自动驾驶和人工接管的相关数据信息。如加速度、速度和方向盘数据，数据随着采集车辆的行驶动态变化。
数据保护技术 Octopus通过多种数据保护手段和特性，保障存储在Octopus中的数据安全可靠。 表1 表1 多种数据保护手段 数据保护手段 简要说明 传输加密（HTTPS） 支持HTTP和HTTPS两种传输协议，为保证数据传输的安全性，推荐您使用更加安全的HTTPS协议。 数据备份
获取数据仓库的数据列表 功能介绍 获取数据仓库的数据列表 URI POST /v1.0/{project_id}/common/warehouses/{data_warehouse_id}/data 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String
难例数据集 可选择“全部数据集”、“仅难例数据集”、“非仅难例数据集”。 数据来源：OBS 表3 数据来源为OBS的数据集 参数 说明 数据来源 选择数据来源，此处选择“OBS”。 数据类型 选择数据类型，可选择“图片”、“3D点云”、“音频”和“文本”。 数据格式 选择数据格式
</ModelMetaData> 标注数据.json文件说明 数据集中必含“.json”文件，用于集合该时间戳已标注点云的所有标注数据信息，包括该点云所在的项目id、数据包id、图片上所有标注框信息等。上传数据集前请保证“.json”文件内容正确。“.json”文件编写的参考样例如下： 3D立方体框数据： 该文
数据回放 获取数据片段统计 获取数据片段列表 数据片段详情 获取数据包topic回放索引 获取数据包topic回放数据临时链接 创建回放转仿真场景作业 查询回放转仿真场景作业状态 父主题： API
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
