检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
tmp_dir:供用户存储临时文件的目录。 task_content_json:人工打标需要的标签信息,详细参考“人工打标支持”。(如果没有人工打标,不需要此参数)。 Output 对于output_dir的格式限定如下: 必须有output_dir/dataset目录,存储数据集文件。数
数据量,单位(byte) 表14 RespMetaInfo 参数 参数类型 描述 current_time String 请求时间,UTC时间格式,时间为UTC标准时间 请求示例 获取数据服务总览 https://{endpoint}/v1.0/{project_id}/data/overview 响应示例
资源总数 表8 RespMetaInfo 参数 参数类型 描述 current_time String 请求时间,UTC时间格式,时间为UTC标准时间 请求示例 获取算子作业队列 https://{endpoint}/v1.0/{project_id}/data/queuing-jobs
水电,AZ内逻辑上再将计算、网络、存储等资源划分成多个集群。一个Region中的多个AZ间通过高速光纤相连,以满足用户跨AZ构建高可用性系统的需求。 项目 华为云的区域默认对应一个项目,这个项目由系统预置,用来隔离物理区域间的资源(计算资源、存储资源和网络资源),以默认项目为单位
数据批导 数据集 通用存储 数据合规递送 收集的个人数据项 路采数据包(含有人像的2D图片,音频或视频) 自定义数据集(含有人像的2D图片,音频或视频) 路采数据包(含有人像的2D图片,音频或视频) 个人数据收集的来源和方式 对象存储导入 本地 标注 OBS 通用存储 数据递送 使用个人数据的目的以及安全保护措施
准备工作 注册华为账号并开通华为云 创建用户并授权使用服务 创建对象存储服务 申请公测 购买开通Octopus服务
优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 数据类型:选择“通用存储”。 选择存储目录:选择需要操作的通用存储中的数据。 输出目录:选择可输出的通用存储的目录。 单击“创建”, 在作业总览页面可查看创建好的作业。 创建作业(数据场景) 在左侧菜单栏中,单击“数据处理
资源总数 表8 RespMetaInfo 参数 参数类型 描述 current_time String 请求时间,UTC时间格式,时间为UTC标准时间。 请求示例 查询训练任务资源规格列表 GET https://{endpoint}/v1.0/{project_id}/common
提供数据批导、源数据包、数据处理、数据缓存、数据集管理。 数据结构化:处理车载硬件平台上输出的传感器数据,详细统计各类传感器信息。 数据集治理:支持PB级海量存储。 提供通用存储、模型仓库,方便集中处理数据以及模型信息。 标注服务 以标注为核心。 平台提供点云和图片的人工标注和预标注。 支持数据预标注功能,节省大量人力成本。
├─ 点云1.json #该点云的所有标注信息 ├─ 文件夹2 ├─ 点云2.pcd #点云文件 ├─ 图片2.jpg #该点云图像对应的已标注图片 ├─ 点云2.json #该点云的所有标注信息
内容。 数据图表 单击“数据源”,选择“添加数据源”。 选择数据源后,数据图表显示选择的评测对象。 当3D回放在播放的同时,数据图表中会有标准线跟随时间轴同时移动。 图2 数据图表 感知物体类型 由于各类仿真器对交通参与物类型的覆盖面不同,可能产生仿真器不支持某种类型,或仿真器与仿真回放中类型不匹配。
注册华为账号并开通华为云 在使用华为云服务之前您需要申请华为云账号并进行实名认证。通过此账号,您可以使用所有华为云服务,并且只需为您所使用的服务付费。 如果您已有一个华为云账号,请跳到下一个任务。如果您还没有华为云账号,请参考以下步骤创建。 打开华为云官网,单击“注册”。 根据提
与Octopus在同一区域。 查看OBS桶与Octopus是否在同一区域 查看创建的OBS桶所在区域。 登录OBS管理控制台。 进入“对象存储”界面,可在桶列表的“桶名称”列查找,或在右上方的搜索框中输入已经创建的桶名称搜索,找到您创建的OBS桶。 在“区域”列可查看创建的OBS桶的所在区域。
标计算,则需满足以下条件: 自定义模型包中必须包含推理启动文件以及自定义模型文件,其中推理启动文件需要根据Octopus数据格式对推理结果存储为json进行适配,除此之外还可以包含一些其他必要的自定义脚本、自定义库、自定义算子库等。模型包文件目录结构可参考如下: . ├─ model
业,数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 当选择数据集算子时,数据类型可支持选择通用存储。 创建作业 在左侧菜单栏中,单击“数据处理 > 数据处理”。 选择“作业总览”页签,单击“创建作业”。 图1 创建作业 处理算子:根据需要选择算子。
单日标注修改帧数:统计当日项目中所有标注员提交的标注任务总帧数。 图7 单日标注修改帧数 单日重标注任务数:根据项目流程,如果已提交的标注任务不满足下一步流程操作员的通过标准,操作员将其打回给标注员进行重标注,图表统计每天处于重标注状态的任务,同一任务单日多次被退回至重标注,不重复统计。 图8 单日重标注任务数
数据集形式:选择“数据集”。 数据来源:选择“通用存储”。 数据类型:可选择“图片”、“3D点云”、“音频”、“文本”和“视频”。 数据格式:可选择“Octopus”、“USER_DEFINE”或自定义格式。 标注状态:设置标注状态,支持“未标注”和“已标注”。 通用存储:选择通用存储。 单击“下一步”,添
标注或通用存储生成数据集时的源数据索引json文件,示例: 标注: /tmp/dataset-temp/{versionId}/f7c9a054-3c9e-49c7-8934-a1e1d668eb12/result_frame.json Json文件内容示例: 通用存储: /tm
提供海量仿真场景。自定义逻辑场景的可以进行修改、删除操作,并支持仿真器B。 逻辑场景中场景是完全独立存储与使用的,在逻辑场景生成的泛化场景非常多,其中有价值的场景比例低,如果存储到场景中会对场景模块造成冲击,当前如果认为逻辑场景中保存的个别场景价值高,可以采用下载场景文件到本地再上传到场景模块的方式保留该逻辑场景。
编辑仿真场景信息。 图6 生成仿真场景 任务类型:仿真场景生成。 仿真器:可选择仿真器A和仿真器B。 生成路径:可选仿真场景库和通用存储。此处选择通用存储。 目录名称:下拉选择目录名称。 场景片段名称:格式为“车辆名称_场景标签_该场景片段ID”,也可以在此处再次选择场景片段。 信息编辑结束后,单击“确认”。