-
上传数据格式 - 自动驾驶云服务 Octopus
上传数据格式 在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速的完成数据收集以及数据格式转换。 上传数据格式:Rosbag包+与数据包同名的yaml文件,单包上传大小小于100G。 转换后数据格式:OpenData格式(内必含O
-
数据脱敏 - 自动驾驶云服务 Octopus
数据脱敏 作业总览 作业队列 算子管理 算子示例 父主题: 数据合规
-
转换后数据格式 - 自动驾驶云服务 Octopus
转换后数据格式 Octopus平台支持将上传的Rosbag格式转换为OpenData格式。 数据类型 Octopus平台对数据有以下要求: 数据类型:包括各传感器数据、车辆数据、目标推理数据、自车坐标姿态以及标签记录数据等。 数据格式:Octopus OpenData格式。其中相机采集数据文件后缀为“
-
数据集 - 自动驾驶云服务 Octopus
数据集 数据集 导出任务 Octopus数据集格式说明 父主题: 数据资产
-
作业总览 - 自动驾驶云服务 Octopus
在作业总览中平台支持创建数据标记,数据图标、数据回放、数据集等作业,数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 状态是待脱敏或者脱敏中的数据包不能运行数据回放类型的作业。 数据包类型必须是Rosbag类型。 当选择数据集算子时,数据类型可支持选择通用存储和数据场景。
-
算子示例 - 自动驾驶云服务 Octopus
算子示例 数据脱敏作业 父主题: 数据脱敏
-
场景展示 - 自动驾驶云服务 Octopus
配置了高精地图map_id的数据包,静态场景将使用配置好的高精地图文件显示。未配置map_id的数据包,平台将自动生成一份地图做仿真场景使用,地图参考场景发生的时间戳内的自车轨迹数据。 数据场景相关操作 在“数据场景”模块,还可以完成以下操作。 表1 数据场景相关操作 任务 操作步骤
-
标签管理 - 自动驾驶云服务 Octopus
标签管理 用户可根据实际需求,自定义设置需要的标签。当前支持两种方式添加标签:在线创建和文件上传。 添加标签 在左侧菜单栏中单击“数据资产 > 数据场景”。 单击页面右上角的“标签管理”,单击“新增分类”,输入分类名称,新建分类。 单击分类名称后的,输入标签路径名称,用户将新建一个标签路径。
-
数据处理简介 - 自动驾驶云服务 Octopus
数据处理简介 数据处理可对自动驾驶过程中采集到的数据进行处理、解析,处理的结果可以用于回访定位问题,并可根据不同功能的算子生成不同的数据处理作业。数据处理操作引导如下: 数据批导:创建数据导入任务,收集采集车辆原始数据。 数据处理:支持根据自定义数据服务算子,对数据包进行处理,创建不同类型的作业。
-
数据合规简介 - 自动驾驶云服务 Octopus
数据合规简介 数据合规服务是自动驾驶云服务为用户提供合规监管服务,包含合规室管理、数据流监管、账号管理、权限管理、日志审计服务能力。支持对上传合规服务的数据包进行脱敏处理,提供合规脱敏能力,支持将数据包中人脸、车牌、点云脱敏。支持用户使用合规服务创建脱敏算子、下发脱敏任务。 在使
-
内置场景挖掘规则 - 自动驾驶云服务 Octopus
补充说明 上述距离范围指物体几何中心距离 有效长度不足10秒的场景片段在输入场景库时会自动在片段前后填充时间使整个片段扩展到10秒 父主题: 数据场景
-
导出任务 - 自动驾驶云服务 Octopus
导出任务 导出数据集 单击数据集列表操作栏的“导出”。 选择数据目的地。 图1 数据目的地 数据目的地:默认选择OBS。 访问密钥:请输入访问密钥(AK)。 私有访问密钥:请输入私有访问密钥(SK)。 OBS目录:请指定数据集导出后存放的目录。 访问密钥ID(AK)和私有访问密钥
-
作业队列 - 自动驾驶云服务 Octopus
时支持对任务优先级的调整。 其他租户的队列作业不允许操作。 在左侧菜单栏中单击“数据服务 > 数据处理”。 选择“作业队列”页签,可根据作业类型(算子作业或内部作业)查看作业。 图1 作业队列 数据处理作业队列相关操作 在“作业队列”页签,还可以进行以下操作。 表1 作业队列相关操作
-
获取数据服务总览 - 自动驾驶云服务 Octopus
枚举值: DATA_MARK(数据标记) OPEN_DATA(数据回放) DATA_SET(数据集) REPLAY_SIM(回放仿真) PLOT_DATA(数据图表) DATA_DESENSITIZATION(数据脱敏) PACKAGE_IMPORT(数据包导入) PACKAGE_DELETE(数据包删除)
-
创建数据集 - 自动驾驶云服务 Octopus
是 String 数据集名称 最小长度:1 最大长度:64 data_type 是 String 数据集数据类型 枚举值: IMAGE(图片) POINT_CLOUD(点云) TEXT(文本) VIDEO(视频) dataset_form 是 String 数据集形式 枚举值: DATASET(数据集)
-
算子管理 - 自动驾驶云服务 Octopus
输出类型 可选择“数据标记”,“数据集”,“数据回放”,“回放仿真”,“数据图表”和“数据脱敏”。 数据标记:用于场景挖掘作业(Rosbag to 场景片段)。 数据回放:输出结果是opendata格式(Rosbag to opendata)。 数据集:用于数据抽取作业,输出至通用存储(Rosbag
-
算子示例 - 自动驾驶云服务 Octopus
算子示例 Rosbag转opendata作业 难例挖掘作业 数据提取作业 Resim作业 父主题: 数据处理
-
作业总览 - 自动驾驶云服务 Octopus
长度不超过64个字符。 Value:只能由英文、数字和特殊符号(\/,.[]-_)组成 。长度不超过512个字符。 选择数据:选择需要操作的数据包中的数据。 单击“创建”,即可创建一个脱敏作业。 脱敏作业更多操作 在“作业总览”页签,还可以完成以下操作。 表1 脱敏作业相关操作
-
算子管理 - 自动驾驶云服务 Octopus
运行镜像:可选择镜像仓库中已创建好的镜像。 镜像版本:选择镜像版本。 启动命令:请输入启动文件地址。 数据类型:此处只支持选择“数据脱敏”。对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护。 单击“确认”,即可创建一个脱敏算子。 脱敏算子相关操作 在“算子管理”页签,还可以完成以下操作。
-
启动数据导入任务 - 自动驾驶云服务 Octopus
启动数据导入任务 功能介绍 启动数据导入任务 URI POST /v1.0/{project_id}/data/import-records/{id}/import 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID