检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据处理简介 数据处理可对自动驾驶过程中采集到的数据进行处理、解析，处理的结果可以用于回访定位问题，并可根据不同功能的算子生成不同的数据处理作业。数据处理操作引导如下： 数据批导：创建数据导入任务，收集采集车辆原始数据。 数据处理：支持根据自定义数据服务算子，对数据包进行处理，创建不同类型的作业。
输出类型 可选择“数据标记”，“数据集”，“数据回放”，“回放仿真”，“数据图表”和“数据脱敏”。 数据标记：用于场景挖掘作业（Rosbag to场景片段）。 数据回放：输出结果是OpenData格式（Rosbag to OpenData）。 数据集：用于数据抽取作业，输出至通用存储（Rosbag
og" 数据集待筛选数据文件目录（注：标注任务与通用存储生成数据集需通过所在目录json文件获取所需筛选数据） SOURCE_DATASET_FILE_DIR OCTPS_DATASET_DIR OCTPS_DATASET_DIR为数据集源数据的数据路径，根据不同的数据来源，所挂路径不同，
获取账号ID 在调用接口的时候，部分URL中需要填入账号ID，所以需要先在管理控制台上获取到账号ID。账号ID获取步骤如下： 登录管理控制台。 单击用户名，在下拉列表中单击“我的凭证”。 在“API凭证”页面中查看账号ID。 图1 获取账号ID 父主题： 附录
源数据包 数据包格式 查看源数据包 场景挖掘 数据回放 回收站 父主题： 数据资产
启动数据导入任务 功能介绍 启动数据导入任务 URI POST /v1.0/{project_id}/data/import-records/{id}/import 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id，获取方法请参见获取项目ID
数据片段详情 功能介绍 获取数据片段详情 URI GET /v1.0/{project_id}/data/episodes/{episode_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id，获取方法请参见获取项目ID episode_id
算子示例 Rosbag转OpenData作业（数据回放） 场景挖掘作业（数据标记） 数据提取作业（数据集） Resim作业（回放仿真） 父主题： 数据处理
获取数据片段统计 功能介绍 获取数据片段统计 URI GET /v1.0/{project_id}/data/episodes/statistics 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id，获取方法请参见获取项目ID 表2
任务队列，同时支持对任务优先级的调整。 其他租户的队列作业不允许操作。 在左侧菜单栏中单击“数据合规”。 选择“数据脱敏 > 作业队列”页签，可查看作业。 图1 作业队列 父主题： 数据脱敏
已有算法”，系统默认选择模型创建时的关联算法，用户也可手动更改选择其他算法文件。选择该项后，会自动添加算法路径环境变量${ALGORITHM}至容器中，并在“评测启动指令”文本框内输入环境变量提示信息。 选择数据集：用户选择评测使用的数据集。如果选择内置评测选项，数据集不支持视图格式。选择数据集时无法预览到视图数据。
抽帧是将解压后的Rosbag数据，抽出单幅画面，生成图片数据或者视频数据。 自动驾驶汽车在进行测试时会产生大量数据，车企需要对这些数据高效处理与分析，因此在进行自动驾驶研究时需要对这些原始数据有选择性、针对性地进行提取和分析，抽帧便是一种筛选数据的方式。针对数据类型，Octopus将抽帧任务分为图片抽帧和点云抽帧。
算子示例 数据脱敏作业 父主题： 数据脱敏
场景挖掘 场景挖掘 内置场景挖掘规则 父主题： 源数据包
是 String 数据包路径，路径长度不超过255位 ak 是 String ak值，大写英文字母或数字，长度为20位 sk 是 String sk值，英文字母或数字，长度为40位 packages 是 Array of strings 数据包名列表，最多10个数据包 agreement_confirm
更新数据包标签 功能介绍 更新数据包标签 URI PUT /v1.0/{project_id}/data/packages/{id}/tags 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id，获取方法请参见获取项目ID id 是 String
payload String 删除数据 meta_info MetaInfo object 元数据 表4 MetaInfo 参数 参数类型 描述 current_time String 请求时间，UTC时间格式，时间为UTC标准时间 请求示例 删除数据集 DELETE https://{endpoint}/v1
Octopus平台支持用户删除数据包，执行删除操作的数据包将暂存回收站，等待用户可根据项目情况及时恢复或永久删除。具体操作参考如下： 在“数据包”页签，单击指定数据包操作栏内的“删除”。 确认后单击“确认删除”，删除后的数据包将放入回收站。 图1 删除数据包 查看数据包状态。 单击“回收站
枚举值： DATA_MARK(数据标记) OPEN_DATA(数据回放) DATA_SET(数据集) REPLAY_SIM(回放仿真) PLOT_DATA(数据图表) DATA_DESENSITIZATION(数据脱敏) PACKAGE_IMPORT(数据包导入) PACKAGE_DELETE(数据包删除)
时支持对任务优先级的调整。 其他租户的队列作业不允许操作。 在左侧菜单栏中单击“数据服务 > 数据处理”。 选择“作业队列”页签，可根据作业类型（算子作业或内部作业）查看作业。 图1 作业队列 数据处理作业队列相关操作 在“作业队列”页签，还可以进行以下操作。 表1 作业队列相关操作
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
