检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
评测对比 创建评测对比任务 平台支持创建2-4个评测任务结果对比。 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测对比”页签,单击“新建评测对比”,填写基本信息。 图1 新建评测对比 名称:对比任务名称,只能包含数字、英文、中文、下划线、中划线。 描述:简要描述任务,
Octopus标注服务提供团队管理,为不同团队分配不同项目。未分配到标注项目的团队不能查看该标注项目信息,保证标注任务的私密性及安全性。 前提条件 用户已开通账号。 管理员已添加用户,并分配标注平台完全控制权限。添加用户操作请参考用户管理。 创建团队 在左侧菜单栏中单击“标注服务 > 团队用户
用户管理 Octopus标注服务提供用户管理,对所有团队下普通用户进行纳管。 前提条件 用户已开通账号并创建子账号。 管理员已添加用户,并分配标注平台完全控制权限。添加用户操作请参考添加用户。 新增人员 在左侧菜单栏中单击“标注服务 > 团队用户 > 用户管理”。 单击“新增人员”,填写人员信息。
创建评测脚本 添加评测脚本流程为“初始化评测脚本 > 选择评测脚本文件 > 上传评测脚本文件”。具体操作步骤如下: 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测脚本”页签,单击“新建评测脚本”,填写脚本信息。 图1 新建评测脚本 名称:只能包含数字、英文、中文、下划线、中划线,不得超过64个字符。
前提条件 批次任务被拆分为批次子任务。 拆分批次任务 当样本数量庞大时,平台可对批次任务做拆分处理,具体步骤如下: 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称,进入项目内任务列表。 选择“批次任务列表”页签,单击操作栏中的“拆分”。 输入子任
评分方案介绍 Octopus评测指标共有30多项大类指标,当规控算法未通过某些评测指标后,评测分数应能反映算法的性能表现。 本设计根据指标的重要程度将其分为三大类: 主要指标(以下简称A类)。 次要指标(以下简称B类)。 未定义重要度指标(以下简称C类)。 本设计提供如下三种内置的评分方案:
语义分割点云标注任务 语义分割任务是指根据标注规范将待标注点云图像中出现的天空、道路、车辆等类标注物进行标注。 图1 语义分割点云标注任务 绘制对象 单击大规模3D语义分割任务,单击任意一帧,进入人工标注。 单击左侧标注工具栏,选择对应的标注工具。 选择对应的标注类别。 绘制标注物。
任务列表 任务列表展示批次任务列表中所有子任务下的任务,方便用户直观查看所有的任务。 在任务列表还可以进行认领、提交、释放、退回、审核和删除操作。 如下为任务列表相关页面: 图1 任务列表 父主题: 批次任务
统计信息 在批次子任务的“统计信息”页面,可查看该任务详情,项目任务流程以及标注对象统计信息。 任务详情:任务名称、数据类型、标注状态、任务包含的标注信息等。 图1 任务详情 项目任务流程:显示任务当前进度情况。 图2 项目任务流程 标注框数统计:人工/预标注对象数量统计。 图3
理后台进行标签和属性的配置;支持自定义标签属性及默认标签属性模板;支持多种标签展示类型;支持字体大小和行间距设置;提升项目功能完整性和标注服务在文本标注场景下的竞争力。当前支持文件类型包括:txt、yaml、csv、xml,文件编码仅支持UTF-8。单个文本不超过100M。 图1
评测分数计算介绍 评分方案介绍 AB类log函数评分方案 AB类均匀权重(Average)评分方案 C类均匀权重评分(Average)方案 父主题: 评测管理
在场景、逻辑场景和测试用例,以及添加场景、逻辑场景和测试用例时,可以通过标签筛选,快速筛选出场景或用例。 标签筛选 在左侧菜单栏中单击“仿真服务 > 场景管理”。 在页面中单击“标签筛选”。 在筛选框中输入内容,查找目标标签。也可在左侧标签树列表中选择目标标签。 勾选左侧目标标签后,右侧界面会显示左侧勾选的目标标签。
pdf 图8 英文pdf 图9 中文pdf 图10 car-PR compare 评测任务日志查看与下载 评测任务运行的过程中生成日志,训练服务提供日志的查看以及下载功能,支持查看评测任务的运行情况。 生成的日志文件共有四种形式: evaluate-xx-{id}.log:用户实际评测任务的训练日志。
其他权限 团队管理员的其他管理权限步骤与平台管理员一致,具体请参考以下: 标注物管理请参考标注管理。 标注模板管理请参考模板管理。 标注脚本管理请参考脚本管理。 父主题: 团队管理员
> B > C > D。 场景描述:不得包含“@#$%^&*< > \”字符,不得超过255个字符。 勾选“我已阅读并同意《八爪鱼自动驾驶云服务使用声明》”。 添加场景标签,标签数量不超过50个。 直接选择:单击“添加标签”,从场景标签中直接选择标签,也可新建标签。 多项搜索:可根
在线仿真配置 使用在线仿真器,需要用户进行一些单独配置。 关闭锁屏。 图1 关闭锁屏 调整屏幕分辨率。 图2 调整屏幕分辨率 修改默认浏览器(改成chrome或firefox,使用KDE自带的Konqueror目前有兼容问题)。 图3 修改默认浏览器 父主题: 在线仿真
标注项目 创建项目 项目详情 父主题: 项目管理
场景回放 当场景已运行成功且创建任务时选择录制所有场景时,仿真任务支持回放场景。用户可选用3D回放进行回放,回放页面可自动播放车辆的行动场景。 仿真器回放 3D回放 父主题: 并行仿真
以认领任务进行标注。 一个标注任务只能由一个标注员完成。同一项目中一个标注员最多认领5个标注任务。 认领标注任务 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称,查看该项目包含的可认领或已认领未提交的标注批次任务列表。 单击未指定标注员的子任务
批次任务 批次任务列表 任务列表 项目内标注物管理 规范管理 关系管理 父主题: 项目管理