正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
USER_DEFINE(自定义格式) data_source 否 String 枚举值: LABEL(标注任务) LOCAL(本地) OBS HOUSE(数据仓库) DATASET(数据集) owner 否 String 数据集类型 枚举值: CUSTOMER(自定义数据集) SYSTEM(内置数据集)
esult/data" 数据集日志文件目录 TARGET_LOG_DIR="/tmp/…/log" 数据集待筛选数据文件目录(注:标注任务与通用存储生成数据集需通过所在目录json文件获取所需筛选数据) SOURCE_DATASET_FILE_DIR OCTPS_DATASET_DIR
Integer 最新版本 data_source String 数据来源 枚举值: LABEL(标注) LOCAL(本地) OBS HOUSE(数据仓库) DATASET(数据集) owner String 数据集类型 枚举值: CUSTOMER(自定义数据集) SYSTEM(内置数据集)
109:容器启动异常,110:创建容器失败,111:未选择数据仓库,201:数据包不存在,202:资源不可用,203:数据包类型异常,204:数据包状态不符合要求,205:场景片段不存在或源文件不存在,206:数据来源与算子类型不匹配,99999:作业运行失败) msg_error
抽帧结束时间,UTC标准时间毫秒时间戳 最小值:1000000000000 最大值:2000000000000 warehouse_id 是 String 抽帧结果放入的数据仓库id dataset_id 否 String 抽帧结果放入的数据集id 最大长度:36 topics 是 Array of strings
请检查数据包状态或解除标签引用 409 octopus.101006 Tag Used In Data Warehouse 标签被数据仓库引用 请删除数据仓库或解除标签引用 409 octopus.102005 Can not restore deleted failed package
与datahub对接的算法镜像制作 算法与仿真平台datahub通过grpc连接,通过接收osi数据作为输入,并将算法内部信号输出到datahub,仿真平台可以生成仿真的osi和算法pb,用于3d回放展示和算法的白盒化评测。如下图所示: 图1 算法镜像 具体grpc连接datah
双屏预览。 图10 在线编辑 新建文件夹:选中文件夹并单击,用户将新建一个该文件夹的子文件夹。选中工程文件并单击,将会新建一个新的文件夹,与用户已有的文件夹同级。 新建文件:单击,或右键文件夹,单击“新建文件”。 修改文件:单击,用户可对文件名称进行修改。 删除文件:单击,用户可删除文件。
镜像制作(数据集) Dockerfile示例 环境变量使用说明 父主题: 镜像仓库
Dockerfile示例 用户可使用命令行模式或Dockerfile模式进行构建。以数据集自定义镜像为例,一般的镜像制作Dockerfile示例如下: 数据集镜像不支持调用GPU资源。 # 载入基础镜像,用户可手动制作或拉取官方镜像 FROM registry-cbu.huawei
作业总览 在作业总览中平台支持创建数据标记,数据图表、数据回放、数据集等作业,数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 状态是待脱敏或者脱敏中的数据包不能运行数据回放类型的作业。 数据包类型必须是Rosbag类型。 当选择数据集算
处理数据 在作业总览中平台支持创建数据标记,数据图标、数据回放、数据集等作业,数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 数据包类型必须是Rosbag类型。 当选择数据集算子时,数据类型可支持选择通用存储。 创建作业 在左侧菜单栏中,单击“数据处理
通用存储 创建存储目录 在左侧菜单栏中,单击“数据资产 > 通用存储”。 选择“通用存储”页签,单击“创建存储目录”,填写基本信息。 图1 创建存储目录 单击“确定”,通用存储列表可查看新建通用存储。 通用存储相关操作 在“通用存储”列表,还可以完成以下操作。 表1 通用存储相关操作
车辆名称、标定ID、驾驶模式、采集站点、驾驶路线、采集时间、和总数据量以及各类传感器采集的数据量。 如果数据包异常,一般是由于与数据包同名的yaml文件配置错误,可参照与数据包同名的yaml配置文件说明 ,修改文件内容,再次创建数据收集任务。 数据处理算子未运行完毕,不可回放。 父主题:
mp4 #非必填,大小不限制,时长限制10min,命名大小不可超过128位,不可有特殊字符。 与数据包同名的yaml配置文件说明 数据包中必须含有与数据包同名的yaml配置文件主要包括车辆名称、传感器信息和标定ID等信息,详情参考如下: # 华为八爪鱼自动驾驶云服务数据采集说明
mp4 #非必填,大小不限制,时长限制10min,命名大小不可超过128位,不可有特殊字符。 与数据包同名的yaml配置文件说明 数据包中必须含有与数据包同名的yaml配置文件主要包括车辆名称、传感器信息和标定ID等信息,详情参考如下: # 华为八爪鱼自动驾驶云服务数据采集说明
mp4 #非必填,大小不限制,时长限制10min,命名大小不可超过128位,不可有特殊字符。 与数据包同名的yaml配置文件说明 数据包中必须含有与数据包同名的yaml配置文件主要包括车辆名称、传感器信息和标定ID等信息,详情参考如下: # 华为八爪鱼自动驾驶云服务数据采集说明
选择“数据导入”页签,单击“导入”。 选择“对象存储导入”页签,填写具体信息。 选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子目录。包含有“Rosbag包和与数据包同名yaml”文件夹的子目录将被识别为有效数据包,可导入。上传数据前,请确保原始数据包含必要的有效文件。 图1 数据对象存储导入 表1
选择“数据导入”页签,单击“导入”。 选择“对象存储导入”页签,填写具体信息。 选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子目录。包含有“Rosbag包和与数据包同名yaml”文件夹的子目录将被识别为有效数据包,可导入。上传数据前,请确保原始数据包含必要的有效文件,具体可参考上传数据格式。 图1
抽帧是将解压后的Rosbag数据,抽出单幅画面,生成图片数据或者视频数据。 自动驾驶汽车在进行测试时会产生大量数据,车企需要对这些数据高效处理与分析,因此在进行自动驾驶研究时需要对这些原始数据有选择性、针对性地进行提取和分析,抽帧便是一种筛选数据的方式。针对数据类型,Octopus将抽帧任务分为图片抽帧和点云抽帧。