检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建评测脚本 添加评测脚本流程为“初始化评测脚本 > 选择评测脚本文件 > 上传评测脚本文件”。具体操作步骤如下： 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测脚本”页签，单击“新建评测脚本”，填写脚本信息。 图1 新建评测脚本 名称：只能包含数字、英文、中文、下划线、中划线，不得超过64个字符。
等信息。 评测脚本相关操作 在“评测脚本”列表，可对脚本进行以下操作。 表1 评测脚本相关操作 任务 操作步骤 查找脚本 在搜索输入框中输入搜索条件，按回车键即可查询。 查看脚本详情 单击脚本名称，查看脚本详情。 删除脚本 单击操作栏的“更多 > 删除”，删除脚本。 说明： 在使用中的评测脚本不能被删除。
以上信息填写无误后，单击“确认”。 脚本管理相关操作 在标注脚本列表，还可以进行以下操作。 表1 脚本管理相关操作 任务 操作步骤 编辑标注脚本 单击操作栏内的“编辑”，即可修改标注脚本信息。 删除标注脚本 单击操作栏的“删除”，删除单个标注脚本。 勾选多个标注脚本，单击列表上方的“删除”，可批量删除标注脚本。
ntrypoint。 目前自定义算法、自定义评测、自定义脚本的镜像制作使用的基础镜像版本要求为：ubuntu18.04及以上。算法与仿真器需要采用TCP协议进行通信。 自定义评测镜像制作 与datahub对接的算法镜像制作 评测算法的自研proto接口 父主题： 镜像仓库
测管理模块即可被仿真任务使用。在制作评测算法镜像的Dockerfile中，建议将评测代码编译成的二进制文件COPY到系统的/usr/bin目录下，便于在前端界面填写评测镜像的运行命令时直接填写该二进制文件的名称即可。在镜像中新建一个shell脚本来运行评测代码也是可以接受的方案。
与datahub对接的算法镜像制作 如图所示，算法与仿真平台datahub通过grpc连接，通过接收osi数据作为输入，并将算法内部信号输出到datahub。 仿真平台可以生成仿真的osi和算法pb，用于3d回放展示和算法的白盒化评测。 具体grpc连接datahub的代码可以参考八爪鱼提供的demo样例。
镜像制作（训练） Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件，请确保基础镜像内包含上述软件且能通过PATH找到。 一般情况下，训练与评测定义为同一个引擎，主要包括算法或评测脚本运行所需要的基本依赖环境。用户可使用命令行模式或Dockerfile
镜像制作（标注） Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件，请确保基础镜像内包含上述软件且能通过PATH找到。 标注镜像Dockerfile示例 环境变量使用说明 父主题： 镜像仓库
示例镜像制作 Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件，请确保基础镜像内包含上述软件且能通过PATH找到。 Dockerfile示例 启动命令： bash /home/Octopus/run.sh 镜像构建： docker build -f Dockerfile
镜像制作（数据集） 数据集镜像Dockerfile示例 环境变量使用说明 父主题： 镜像仓库
2 合规性 PERFORMANCE_COMFORT 3 舒适性 PERFORMANCE_INTELLIGENCE 4 智能型 父主题： 镜像制作（仿真）
1:8080/${推理服务的请求路径} 本地调试完成后，每次都需将镜像推送至新版本，使用二次推送镜像功能会导致推理服务镜像更新不生效。 父主题： 镜像制作（训练）
用户可使用命令行模式或Dockerfile模式进行构建。 以预标注自定义镜像为例，一般的镜像制作Dockerfile示例如下（xxx替换为实际路径）： # 载入基础镜像，训练或评测引擎一般需包含cuda/cudnn等算法基础环境。用户可手动制作或拉取官方镜像 FROM xxx/cuda:11.0.3-devel-ubuntu18
用户可使用命令行模式或Dockerfile模式进行构建。 以数据集自定义镜像为例，一般的镜像制作Dockerfile示例如下： 数据集镜像不支持调用GPU资源。 # 载入基础镜像，用户可手动制作或拉取官方镜像 FROM registry-cbu.huawei.com/vcloud/euleros-python:2
通过PATH找到。 一般情况下，训练与评测定义为同一个引擎，主要包括算法或评测脚本运行所需要的基本依赖环境。用户可使用命令行模式或Dockerfile模式进行构建。以训练、评测镜像为例，一般的镜像制作Dockerfile示例如下（xxx替换为实际路径）： # 载入基础镜像，训练或
模型进行模型微调后，调优后的模型会自动保存到模型仓库中。 上传模型需包含以下内容： 模型文件。 推理脚本，推理脚本命名为：customer_auto_label.py。 推理脚本所需依赖库。 新建模型仓库 在左侧菜单栏中单击“数据资产 > 模型管理”。 单击“新建模型仓库”，填写基本信息。
json。审核规则信息按照特定格式（详见“预审核规则格式说明”）存在json文件中，创建任务成功后可以在平台报告中看到此规则信息。 父主题： 镜像制作（标注）
创建Octopus格式数据集需在自定义镜像内将数据处理为Octopus格式存入TARGET_LOG_DIR内，标注来源的数据集创建只支持Octopus格式。 父主题： 镜像制作（数据集）
单击用例名称查看该用例详细信息。 图1 测试用例详情 编辑测试脚本。 可根据需要添加测试脚本，在测试用例详情页，单击测试脚本后面的“创建镜像”。 图2 编辑测试脚本 镜像选择：下拉选择镜像。 镜像版本：下拉选择镜像版本。 运行命令：输入镜像的运行命令，具体命令根据镜像启动脚本确定。示例命令如：bash start
其他权限 团队管理员的其他管理权限步骤与平台管理员一致，具体请参考以下： 标注物管理请参考标注管理。 标注模板管理请参考模板管理。 标注脚本管理请参考脚本管理。 父主题： 团队管理员
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
