检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
标注员 认领标注任务 人工标注操作指导 标注工具和快捷键说明 父主题: 标注服务
培训考试 已交付的子任务,可以转化为培训题库或考试题库,当项目包关联了培训题库或考试题库时,标注员、审核员可通过系统进行培训或考试。 培训系统 考试系统 父主题: 标注服务
算法管理 训练算法 算法文件说明 父主题: 训练服务
场景管理 场景管理分类设计使用逻辑 场景库管理 场景管理 逻辑场景库管理 逻辑场景管理 测试套件管理 测试用例管理 标签管理 父主题: 仿真服务
认领验收任务 按照全流程计划,标注任务审核完毕后,进入标注任务的下一个阶段依次验收(初验-终验)。验收员依据标注规范和一定验收标准对标注任务能否通过验收进行把关。验收通过,则该标注任务完成。验收不通过,验收员将标注任务退回至绑定的审核员名下,审核员重新审核该任务,再退回至标注员重
场景管理 仿真场景模块支持对单个仿真场景的增删改查操作。用户可根据场景类型,依据平台提示,上传符合要求的场景文件。场景创建完毕后,用户可选择在线仿真机器加载场景,通过仿真器内置算法检验场景质量。 创建场景 仿真场景支持用户上传符合仿真器场景规范的自定义场景。添加场景的步骤可参考如下:
任务队列 标注批次任务在创建之后,可在此查看任务队列,同时支持对任务优先级的调整。 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“任务队列”页签,可根据标注类型(预标注或人工标注)查看标注任务。 图1 任务队列 任务队列相关操作 在“任务队列”页签,还可以进行以下操作。 表1
管理团队 团队管理员可根据业务需求对团队中的成员进行管理,可为团队新增人员或删除人员,可为团队中成员重新分配职能。单击“标注服务 > 团队用户” ,单击团队名称,可查看该团队内所有成员及职能。 查找成员:在搜索框内输入名字进行查找。 新增人员:单击“新增人员”,根据职能选择人员。
管理项目 项目需绑定管理员所在团队。 团队管理员管理项目步骤与平台管理员一致。 详细步骤请参考项目管理。 父主题: 团队管理员
认领审核任务 在全流程的情况下,标注任务标注完毕后提交进入审核阶段(预初审-初审-预终审-终审),初审阶段(预初审-初审)提交后进入终审阶段(预终审-终审),团队中的审核员可以根据阶段认领任务进行审核。以下步骤为认领初审任务(预初审-初审)或终审(预终审-终审)任务的操作步骤。
任务队列 训练任务在创建之后,可在此查看任务队列,同时支持对任务优先级的调整。 在左侧菜单栏中单击“训练服务 > 训练任务”。 选择“任务队列”页签,可查看任务。 图1 任务队列 训练任务队列相关操作 在“任务队列”页签,还可以进行以下操作。 表1 训练任务队列相关操作 任务 操作步骤
评测列表 在评测列表,还可以进行以下操作: 表1 评测列表相关操作 任务 操作步骤 搜索评测 在搜索框中输入关键字搜索相关评测。支持通过评测名称、评测ID和评测类型搜索。 查看评测详情 单击评测名称,页面跳转至评测详情页。 编辑评测 单击操作栏中的“编辑”,可编辑评测的信息。 删除评测
逻辑场景库管理 逻辑场景库模块提供逻辑场景库管理功能,支持对逻辑场景库的增删改查功能。 创建逻辑场景库 在左侧菜单栏中单击“仿真服务 > 场景管理”。 选择“逻辑场景库”页签,单击“逻辑场景库分类”后的“新增一级分类”,输入逻辑场景库分类名称,用户将新建一个逻辑场景库分类,目前逻辑场景库分类层级支持四层。
创建任务 Octopus平台提供对评测任务的管理,包括创建、删除、停止评测任务的操作。在评测任务页面, 实时显示多条评测任务的状态、任务创建时间等信息。评测任务创建完毕后,触发任务。评测任务结束后会生成评测任务结果文件,详细展示模型的各项评测指标得分。 创建评测任务 评测任务与评测参数和数据集有关。具体步骤如下:
算法文件说明 用户可将本地算法文件包上传到Octopus平台,算法文件包需要满足一定要求,请详细阅读本节,有助于用户快速完成算法开发。 算法文件基本要求 算法文件目录结构可参考如下,需要包括启动文件“xxx.py”(启动文件名可自定义),以及一些必要的训练文件。 启动文件(必选)
其他权限 团队管理员的其他管理权限步骤与平台管理员一致,具体请参考以下: 标注物管理请参考标注管理。 标注模板管理请参考模板管理。 标注脚本管理请参考脚本管理。 父主题: 团队管理员
评测结果 评测任务完成后,可单击评测任务名称查看模型评测各项得分。任务详情页面展示了评测任务详情信息以及评测模型结果信息两部分内容。 任务详情 任务详情页面,详细展示了任务名称、类别、资源规格等基本信息。 图1 任务详情 任务视图 根据用户选择“自定义”或“内置”评测方式,详情页会展示以下三种流程图:
评测分数计算介绍 评分方案介绍 AB类log函数评分方案 AB类均匀权重(Average)评分方案 C类均匀权重评分(Average)方案 父主题: 评测管理
审核操作指导 审核是检验标注任务质量的一个手段,审核的方式是从标注任务中抽取一定比例的图片,通过被抽取的图片标注准确率判断该标注任务整体准确率,该标注任务是否通过审核。 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称。 选择“批次任务列表”,单击批次任务前的。
关系管理 前提条件 项目的数据类型为“文本”,需要创建关系,并对关系进行管理。 创建关系 在左侧菜单栏中单击“标注服务 > 项目管理”。 选择“标注项目”页签,单击项目名称,进入项目内任务列表。 选择“关系管理”页签,单击“创建”,填写创建信息。 图1 创建关系 名称:自定义关系