检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
模型评测 在机器学习中,通常需要使用一定的方法和标准,来评测一个模型的预测精确度。自动驾驶领域通常涉及目标检测、语义分割、车道线检测等类别,如识别车辆、行人、可行区域等对象。 评测脚本 评测任务 任务队列 评测对比 模型数据集支持 父主题: 训练服务
使用流程 Octopus平台提供了从“数据准备 → 标注数据 → 训练模型 → 仿真任务”的全流程开发,针对每个环节,其使用是相对独立自由的。本章节梳理了Octopus使用流程详解,此文档介绍其中一种方式完成自动驾驶开发。 图1 Octopus的使用流程 表1 使用流程说明 流程
资源池信息管理 查询可用资源规格 父主题: API
型评测各项得分。任务详情页面展示了评测任务详情信息以及评测模型结果信息两部分内容。 任务详情 任务详情页面,详细展示了任务名称、类别、资源规格等基本信息。 图1 任务详情 任务视图 根据用户选择“自定义”或“内置”评测方式,详情页会展示以下三种流程图: 自定义评测 图2 自定义评测
权限 对应API接口 授权项(Action) IAM项目 (Project) 企业项目 (Enterprise Project) 查询可用资源规格 GET /v1.0/{project_id}/common/clusters/resource-specs octopus:resourceManager:get
修改,任务名称可自定义。 审核比例 预审核默认比例为100。 审核模型 选择审核模型和版本。 标注脚本 选择标注脚本。 资源规格 当前项目中可用的资源规格。 优先级 设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 可一同预审核 选择需要一同审核的标注子任务。
是 Long 算子id,配置算子时此项必填 resource_spec 是 String 资源规格,配置算子时此项必填,示例:1Core_4GiB。具体获取方式可参考“查询可用资源规格“接口 envs 否 Array of JobEnv objects 环境变量,最多十组 表5 JobEnv
分割”、“3D语义分割”、“车道线检测”八个类别。 选择“用户”,则不允许选择内置评测项,仅可使用用户自定义评测。 资源规格:当前项目中可用的资源规格,资源规格需要平台管理员在纳管模型评测用途的任务作业集群后创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。
修改,任务名称可自定义。 审核比例 预审核默认比例为100。 审核模型 选择审核模型和版本。 标注脚本 选择标注脚本。 资源规格 当前项目中可用的资源规格。 优先级 设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 可一同预审核 选择需要一同审核的标注子任务。
是 Long 算子id,配置算子时此项必填 resource_spec 是 String 资源规格,配置算子时此项必填,示例:1Core_4GiB。具体获取方式可参考“查询可用资源规格“接口 envs 否 Array of JobEnv objects 环境变量,最多十组 表5 JobEnv
分割”、“3D语义分割”、“车道线检测”八个类别。 选择“用户”,则不允许选择内置评测项,仅可使用用户自定义评测。 资源规格:当前项目中可用的资源规格,资源规格需要平台管理员在纳管模型评测用途的任务作业集群后创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。
多场景、安全稳定的容器运行环境,平台可以将集群统一纳管,更方便查看节点资源使用量和修改节点用途,以及设置资源规格。其中,cce-user-job集群需强制纳管以适配资源规格。如用户直接通过后台操作k8s集群及节点造成环境错乱,则需承担责任。 查看集群纳管 资源管理 工作空间 在使
步骤六:查看仿真评测结果 评测任务结束后,可查看评测任务结果。 单击仿真任务名称,进入该任务的详情页。 查看任务详情。 任务详情包含任务名称、任务使用的仿真算法、任务类型等信息。 查看仿真场景的运行结果。 仿真任务包含的仿真场景运行成功后,用户可以关注该仿真场景的得分,以及是否通
仿真评测结果 评测任务结束后,可查看评测任务结果。 单击仿真任务名称,进入该任务的详情页。 查看任务详情。 任务详情包含任务名称、任务使用的仿真算法、任务类型等信息。 查看仿真场景的运行结果。 仿真任务包含的仿真场景运行成功后,用户可以关注该仿真场景的得分,以及是否通过评测指标的
processor_id 是 Long 算子id 最小值:1 resource_spec 是 String 资源规格,示例:1Core_4GiB。具体获取方式可参考“查询可用资源规格“接口 priority 否 Integer 作业优先级,数值越大优先级越高 最小值:-50 最大值:50
processor_id Long 算子id,配置算子时此项必填 resource_spec String 资源规格,配置算子时此项必填,示例:1Core_4GiB。具体获取方式可参考“查询可用资源规格“接口 envs Array of JobEnv objects 环境变量,最多十组 表9 JobEnv
Query参数 参数 是否必选 参数类型 描述 topic 是 String opendata消息名 最大长度:255 size 否 String 大小规格,在获取camera和gnss类型数据时,size参数必填。camera类型size为s或m,gnss类型size为l或s 缺省值:m 请求参数
Query参数 参数 是否必选 参数类型 描述 topic 是 String opendata消息名 最大长度:255 size 否 String 大小规格,在获取camera类型数据时,size参数必填。camera类型size为s或m 请求参数 表3 请求Header参数 参数 是否必选 参数类型
ttl格式的文件(标签树)上传。上传成功后刷新页面,可以在页面上看到新导入的标签树。 .ttl格式文件可参考导出已有的标签树文件。 .ttl文件规格不大于200kb,标签数量不大于500个。 根节点的名称必须是唯一的,标签树中同一父节点下不能有同名标签,且根节点数量不超过10个。 标签管理相关操作
查看用户拥有的OBS服务权限,可参考如何查看用户拥有的权限? 数据处理。 可选择数据是否进行OpenData转换,并且选用相对应的数据服务算子(数据回放)以及资源规格。 图2 数据处理 如果yaml和算子中有相同的信息,算子上传后,会覆盖yaml中的信息。 没有进行OpenData转换的数据,只能作为算子作业的输入使用。