检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在机器学习中，通常需要使用一定的方法和标准，来评测一个模型的预测精确度。自动驾驶领域通常涉及目标检测、语义分割、车道线检测等类别，如识别车辆、行人、可行区域等对象。 评测脚本 评测任务 任务队列 评测对比 模型数据集支持 父主题： 训练服务
downloadAnnotationProjectUserStatisticReport 创建标注脚本 octopus createAnnotationScript 编辑标注脚本 octopus updateAnnotationScript 批量删除标注脚本 octopus deleteAnnotationScripts
人工标注指定物体，或自定义算法模型中关联特定标注物。 模板管理：提供预标注模板和人工标注模板，用户可根据需求选择。 脚本管理：用户可以根据自身业务的需要创建标注脚本，用于标注任务。 父主题： 标注服务
意《八爪鱼自动驾驶云服务声明》”。 图2 创建版本 表1 版本参数 参数 说明 镜像 选择镜像以及镜像版本。 启动脚本路径 选择脚本的启动文件路径，文件路径为在脚本中的相对路径，当前只支持.py类型的启动文件。 标签 根据需要选择标签。 自定义属性 根据需要选择自定义属性。 标注物
模板管理：提供预标注模板和人工标注模板，用户可根据需求选择。 脚本管理：用户可以根据自身业务的需要创建标注脚本，推送和拉取对应引擎的镜像，用于标注任务。 用户管理：可为任务提供角色分配，对所有团队下普通用户进行管理。 创建团队 创建项目 创建标注物 创建标注脚本 创建标注模板 训练服务 训练服务模块上
由“批次子任务名称-任务名称”组成，批次子任务名称不可修改，任务名称可自定义。 审核比例 预审核默认比例为100。 审核模型 选择审核模型和版本。 标注脚本 选择标注脚本。 资源规格 当前项目中可用的资源规格。 优先级 设定任务的优先级，数值取[-50,50]的整数，数字越大，优先级越高。 可一同预审核
可以自定义boot文件的启动参数，需要在评测脚本中定义。允许添加的参数个数不超过20个。 Key：只能由英文、数字、和特殊符号（,-_）组成，且需要以字母开头 。长度不超过64个字符。 Value：只能由英文、数字和特殊符号（\/,.[]-_）组成 。长度不超过512个字符。 参数命令 参数命令为运行启动脚本的she
训练服务操作引导如下： 算法管理：负责管理用户上传的符合平台规范的算法。 训练任务：用户选择训练算法和训练数据集创建训练任务进行训练。 模型评测：负责管理评测脚本、评测任务和评测对比任务。 编译管理：包含编译任务和编译镜像。训练产生的模型版本，一般不可直接被车载芯片识别，需要经过编译工具，模型编译成车载芯片识别的产物。
行命令为准。Entrypoint只在算法镜像生效，评测镜像和仿真器镜像不支持配置entrypoint。 目前自定义算法、自定义评测、自定义脚本的镜像制作使用的基础镜像版本要求为：ubuntu18.04及以上。算法与仿真器需要采用TCP协议进行通信。 自定义评测镜像制作 与datahub对接的算法镜像制作
长度不超过64个字符。 Value：只能由英文、数字和特殊符号（\/,.[]-_）组成 。长度不超过512个字符。 参数命令 参数命令为运行启动脚本的shell命令，由配置的“Boot文件路径”和“参数列表中参数及参数值”自动生成，例如： main.py --total_epoches=3
如果镜像仓库中的算法镜像已被其他仿真算法引用，需要在镜像仓库中重新创建算法镜像。 配置运行环境 图2 配置运行环境 运行命令：输入运行算法的命令，具体命令根据仿真算法镜像启动脚本确定。示例命令如：bash start.sh，python main.py等。 运行命令需满足以下条件： 不能为空。 必须是满足ASCII码的字符串。
/home/Octopus/run.sh 镜像构建： docker build -f Dockerfile -t guikong:0.1 容器启动脚本示例 Resim结果转json示例 Json转pb文件示例 本地调试 命令示例： docker run -v ${HOME}/worksp
单击评测名称，在评测项目详情页，评测镜像部分，单击“创建镜像”，填写基本信息。 镜像版本：下拉选择镜像版本。 运行命令：输入镜像的运行命令，具体命令根据镜像启动脚本确定。示例命令如：bash start.sh，python main.py等。 运行命令需满足以下条件： 不能为空。 必须是满足ASCII码的字符串。
标注任务日志和审核报告存储在OBS中。 训练服务 算法管理 算法文件存储在OBS中。 训练任务 训练产物、训练任务日志存储在OBS中。 模型评测 评测脚本文件、评测产物、评测任务日志存储在OBS中。 编译管理 编译产物、编译任务日志存储在OBS中。 仿真服务 场景管理 场景文件存储在OBS中。
如果镜像仓库中的算法镜像已被其他仿真算法引用，需要在镜像仓库中重新创建算法镜像。 配置运行环境 图2 配置运行环境 运行命令：输入运行算法的命令，具体命令根据仿真算法镜像启动脚本确定。示例命令如：bash start.sh，python main.py等。 运行命令需满足以下条件： 不能为空。 必须是满足ASCII码的字符串。
任务类型：有人工标注和预标注两种。预标注创建需排队，排队详情请在任务列表界面筛选状态为“队列中”进行查看，此处以预标注为例。 标注脚本：选择创建好的标注脚本。 标注物：预标注模板关联模型，最终调用模型关联的镜像仓库，镜像由用户自行维护上传。 资源规格：当前项目中可用的资源规格，资源规
团队：该模板当前工作空间下被授权的用户均可见。 运行镜像 可选择镜像仓库中已创建好的镜像。 镜像版本 选择镜像版本。 启动命令 镜像的启动命令，具体命令根据镜像启动脚本确定，例如“python3 main.py”。可以参考算子示例中各算子的启动命令。 输出类型 可选择“数据标记”，“数据集”，“数据回放”
、stdbuf、tee软件，请确保基础镜像内包含上述软件且能通过PATH找到。 一般情况下，训练与评测定义为同一个引擎，主要包括算法或评测脚本运行所需要的基本依赖环境。用户可使用命令行模式或Dockerfile模式进行构建。以训练、评测镜像为例，一般的镜像制作Dockerfile示例如下（xxx替换为实际路径）：
泛化场景 创建泛化任务 当逻辑场景状态为“解析失败”和“正在解析”时，无法创建泛化任务。 上传动态和静态场景文件的说明请查看Open SCENARIO2.0场景说明。 当逻辑场景文件版本为OpenSCENARIO2.0.0时，创建的泛化任务支持仿真器B。 在左侧菜单栏中单击“仿真服务
件COPY到系统的/usr/bin目录下，便于在前端界面填写评测镜像的运行命令时直接填写该二进制文件的名称即可。在镜像中新建一个shell脚本来运行评测代码也是可以接受的方案。 实时评测 图2 实时评测 仿真平台定义了eva.proto，用于支持用户自定义实时评测的功能，具体的proto字段说明见其他相关文档。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
