检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
评测结果 评测任务完成后,可单击评测任务名称查看模型评测各项得分。任务详情页面展示了评测任务详情信息以及评测模型结果信息两部分内容。 任务详情 任务详情页面,详细展示了任务名称、类别、资源规格等基本信息。 图1 任务详情 任务视图 根据用户选择“自定义”或“内置”评测方式,详情页会展示以下三种流程图:
标签筛选 在场景、逻辑场景和测试用例,以及添加场景、逻辑场景和测试用例时,可以通过标签筛选,快速筛选出场景或用例。 标签筛选 在左侧菜单栏中单击“仿真服务 > 场景管理”。 在页面中单击“标签筛选”。 在筛选框中输入内容,查找目标标签。也可在左侧标签树列表中选择目标标签。 勾选左
用户Token,通过调用IAM服务获取用户Token接口获取(响应消息头中X-Subject-Token的值) Content-Type 是 String 内容类型。填application/json 表3 请求Body参数 参数 是否必选 参数类型 描述 type 是 String 传输方式 枚举值: OBS(对象存储)
用户Token,通过调用IAM服务获取用户Token接口获取(响应消息头中X-Subject-Token的值) Content-Type 是 String 内容类型。填application/json 表3 请求Body参数 参数 是否必选 参数类型 描述 type 是 String 作业类型 枚举值: SCE
创建评测任务 评测任务与评测参数和数据集有关。具体步骤如下: 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测任务”页签,单击“新建评测任务”,填写基本信息。 图1 新建评测任务 名称:任务组名称,包含中英文、数字、“_”“-”,不得超过32个字符。 描述:简要描述任务
多模态检索 多模态检索通过大模型算法,对用户视频库进行特征提取,再通过多模态视频检索功能,检索出满足文本或者视频搜索条件的视频片段。 前提条件 在服务控制台“总览”>“我的模型”区域,开通“多模态检索”服务,具体操作步骤请参考开通我的模型和购买套餐包。 视频库配置 在左侧菜单栏中单击“智驾模型服务
文本标注数据集文件说明 OCTOPUS格式文件基本要求(文本标注) 上传的OCTOPUS格式数据集需包含以下文件(以txt格式为例)。文本文件支持的格式包含:txt、yaml、xml、csv。 . ├─ 文件夹1 ├─ text1.txt #文本文件
智驾模型简介 通过与AI模型、大模型的结合,提供高精度自动标注能力,大幅度降低传统人工标注数据真值的成本。提供场景数据集生成能力,帮助自动驾驶模型训练快速扩充数据集,低成本获取难例数据集。提供多模态场景理解和检索能力,帮助客户在海量样本库快速、智能的分类和检索。 前提条件 开通相
音频标注数据集文件说明 OCTOPUS格式文件基本要求(音频标注) 上传的OCTOPUS格式数据集需包含以下文件(以mp3格式为例)。音频文件支持的格式包含:wav、mp3、flac、m4a。 . ├─ 文件夹1 ├─ audio1.mp3 #音频文件
2.5D人车图片标注任务 2.5D人车图片标注任务相比于2D人车标注任务,由2D的矩形框转变为2.5D框,可以定位车辆车身的正面与侧面,辅助开发者辨别车辆的行驶方向。 绘制对象 单击2.5D图片标注任务,选择一张图片进入人工标注。 选择标注工具。 单击左侧工具栏2.5D标注工具(快捷键5,非小键盘)。
点云标注任务 点云标注任务是指根据标注规范对点云图像中出现的车、人等标注物进行标注。点云距离单位默认为米。 图1 点云标注任务 绘制对象 单击点云标注任务,单击任意一帧,进入人工标注。 选择标注工具。 单击左侧工具栏“智能缩框标注”(快捷键b)。 图2 选择标注工具 选择标注类别。
车道线图片标注任务 车道线图片标注任务是指依据标注规范对真实路采图片中出现的道路中的车道线、斑马线等交通线路进行标注,一般区分实线、虚线,按需求增加颜色、遮挡程度等额外属性。 图1 车道线图片标注任务 绘制对象 单击车道线标注任务,选择一张图片进入人工标注。 绘制对象。 单击左侧
场景展示 前提条件 符合以下两种条件中的其中之一,即可在此模块查看数据场景片段。 选择自定义挖掘算子(数据标记类型)的作业正常运行完毕(自定义场景片段)。 在源数据包详情界面,手动触发“场景挖掘”按钮,并完成数据场景挖掘作业(内置场景片段)。 生成仿真场景 生成仿真场景必须同时依
用户Token,通过调用IAM服务获取用户Token接口获取(响应消息头中X-Subject-Token的值) Content-Type 是 String 内容类型。填application/json 表3 请求Body参数 参数 是否必选 参数类型 描述 data_id 是 String 输入数据id。取值为
步骤六:查看仿真评测结果 评测任务结束后,可查看评测任务结果。 单击仿真任务名称,进入该任务的详情页。 查看任务详情。 任务详情包含任务名称、任务使用的仿真算法、任务类型等信息。 查看仿真场景的运行结果。 仿真任务包含的仿真场景运行成功后,用户可以关注该仿真场景的得分,以及是否通
仿真评测结果 评测任务结束后,可查看评测任务结果。 单击仿真任务名称,进入该任务的详情页。 查看任务详情。 任务详情包含任务名称、任务使用的仿真算法、任务类型等信息。 查看仿真场景的运行结果。 仿真任务包含的仿真场景运行成功后,用户可以关注该仿真场景的得分,以及是否通过评测指标的
缺省值:10 请求参数 表3 请求Header参数 参数 是否必选 参数类型 描述 Content-Type 是 String 内容类型。填application/json X-Auth-Token 是 String 用户Token,通过调用IAM服务获取用户Token接口获取(响应
环境变量使用说明 镜像运行时,会向运行环境注入部分默认文件配置: 表1 环境变量说明 任务名称 文件名 环境变量 数据集任务 数据集待筛选数据目录 OCTPS_DATASET_DIR 数据集筛选结果数据目录 TARGET_RESULT_DIR="/tmp/…/result/data"
认领标注任务 管理员将任务下发至团队后,团队中的标注员可以认领任务进行标注。 一个标注任务只能由一个标注员完成。同一项目中一个标注员最多认领5个标注任务。 认领标注任务 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称,查看该项目包含的可认领或已认领未提交的标注批次任务列表。
认领验收任务 按照全流程计划,标注任务审核完毕后,进入标注任务的下一个阶段依次验收(初验-终验)。验收员依据标注规范和一定验收标准对标注任务能否通过验收进行把关。验收通过,则该标注任务完成。验收不通过,验收员将标注任务退回至绑定的审核员名下,审核员重新审核该任务,再退回至标注员重