检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
OBS HOUSE(数据仓库) DATASET(数据集) owner String 数据集类型 枚举值: CUSTOMER(自定义数据集) SYSTEM(内置数据集) frame_num Long 文件数 frame_size Long 数据集下版本帧文件总大小,单位字节 project_id
获取数据集版本列表 功能介绍 获取数据集版本列表 URI GET /v1.0/{project_id}/common/datasets/{dataset_id}/versions 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID
数据集镜像Dockerfile示例 本章节介绍Dockerfile示例。 用户可使用命令行模式或Dockerfile模式进行构建。 以数据集自定义镜像为例,一般的镜像制作Dockerfile示例如下: 数据集镜像不支持调用GPU资源。 # 载入基础镜像,用户可手动制作或拉取官方镜像
镜像制作(数据集) 数据集镜像Dockerfile示例 环境变量使用说明 父主题: 镜像仓库
模型数据集支持 模型评测支持多种数据集格式,包括Octopus格式和部分常见开源数据集格式,以下为各类别模型的数据集支持列表和示例。 目标检测2D 目标检测3D 目标追踪2D 目标追踪3D 语义分割2D 语义分割3D 车道线检测 分类 父主题: 模型评测
数据提取作业(数据集) 作业输入输出规范 示例代码 构建镜像 父主题: 算子示例
单击“确认”,等待数据集导出。 查看导出的数据集。 单击“导出任务”页面,即可看到导出任务,可对任务进行删除操作。 在指定的OBS桶中(如“Octopus-beijing1”)可以看到下载的数据集文件夹目录,将包含该数据集的全部文件。 图2 OBS桶 导出的数据集文件目录结构可参考如下(包含图片标注):
{ "label_meta_name": "Car", # 推理文件包含得分 "score": 0.85 } 父主题: 模型数据集支持
710], "raw_file": "clips/0530/1492628545240318854_0/20.jpg"} 父主题: 模型数据集支持
"ymax": 520, "xmin": 900 } } ] } 父主题: 模型数据集支持
4.71 } }, "score": 0.82 } ] } 父主题: 模型数据集支持
文件名 环境变量 数据集任务 数据集待筛选数据目录 OCTPS_DATASET_DIR 数据集筛选结果数据目录 TARGET_RESULT_DIR="/tmp/…/result/data" 数据集日志文件目录 TARGET_LOG_DIR="/tmp/…/log" 数据集待筛选数据文件
示例代码 作业输入输出规范示例代码如下图所示: 父主题: 数据提取作业(数据集)
0 -1.57 0. 0. 0. 0. 1.75 1.96 3.75 -7.57 12.66 -0.67 -1.54 0. 父主题: 模型数据集支持
+--- 000001.png +--- 000002.png 示例标注/推理文件 2D语义分割-palette.png 父主题: 模型数据集支持
70, 71, 72, 80, 81, 99, 252, 254], dtype=uint32) 父主题: 模型数据集支持
--topic pandar --type pcd” 完成后在${HOME}/tmp/output目录查看运行结果文件: 父主题: 数据提取作业(数据集)
<filename>hash0-1598929950099.xml</filename> </annotation> 父主题: 模型数据集支持
标,不需要此参数)。 Output 对于output_dir的格式限定如下: 必须有output_dir/dataset目录,存储数据集文件。数据集文件有格式要求(Octopus、PascalVOC...)。 必须有_SUCCESS或 _FAILURE文件,标志用户镜像任务完成(或失败)。
数据缓存 提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 在数据集列表(数据资产 > 数据集)中,单击操作栏中的“缓存加速”。 在数据缓存界面出现缓存的数据。 父主题: 数据资产