检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建评测脚本 添加评测脚本流程为“初始化评测脚本 > 选择评测脚本文件 > 上传评测脚本文件”。具体操作步骤如下: 在左侧菜单栏中单击“训练服务 > 模型评测”。 选择“评测脚本”页签,单击“新建评测脚本”,填写脚本信息。 图1 新建评测脚本 名称:只能包含数字、英文、中文、下划线、中划线,不得超过64个字符。
等信息。 评测脚本相关操作 在“评测脚本”列表,可对脚本进行以下操作。 表1 评测脚本相关操作 任务 操作步骤 查找脚本 在搜索输入框中输入搜索条件,按回车键即可查询。 查看脚本详情 单击脚本名称,查看脚本详情。 删除脚本 单击操作栏的“更多 > 删除”,删除脚本。 说明: 在使用中的评测脚本不能被删除。
以上信息填写无误后,单击“确认”。 脚本管理相关操作 在标注脚本列表,还可以进行以下操作。 表1 脚本管理相关操作 任务 操作步骤 编辑标注脚本 单击操作栏内的“编辑”,即可修改标注脚本信息。 删除标注脚本 单击操作栏的“删除”,删除单个标注脚本。 勾选多个标注脚本,单击列表上方的“删除”,可批量删除标注脚本。
测试用例管理 测试用例模块支持对单个用例的增删改查操作。用户可根据场景类型,本地选择对应的场景文件。用例创建完毕后,用户可选择在线仿真机器加载测试用例,通过仿真器内置算法检验测试用例质量。 创建用例 用例管理 父主题: 场景管理
测试套件管理 测试套件模块提供测试套件管理功能,支持对测试套件的增删改查功能。自建测试套件将场景格式相同的测试用例,便于用户进行开发。 创建测试套件 在左侧菜单栏中单击“仿真服务 > 场景管理”。 选择“测试套件”页签,单击“测试套件列表”后的“新增套件”。 图1 新增套件 测试
用例管理 在测试用例的详情页,可以进行以下操作: 查看测试用例详情。 单击用例名称查看该用例详细信息。 图1 测试用例详情 编辑测试脚本。 可根据需要添加测试脚本,在测试用例详情页,单击测试脚本后面的“创建镜像”。 图2 编辑测试脚本 镜像选择:下拉选择镜像。 镜像版本:下拉选择镜像版本。
仿真器:支持仿真器B。 测试套件:可直接选择套件。 测试用例描述:简要描述用例,不包含“@#$%^&*< > \”,不超过255个字符。 选择场景。 选择场景,也可通过场景标签筛选选择场景。 图4 选择场景 单击“创建”,页面提示创建成功,并在测试用例管理页面看到新建的测试用例信息。 测试用例相关操作
场景中交通参与物的状体和算法内部状态。 因此,在场景的基础上,添加与该场景相匹配的测试脚本,就形成了一个测试用例。也就是说,测试用例是一个场景和测试脚本的集合。 同样,测试套件是将测试目的相同的测试用例归到一起,方便创建仿真任务时直接选择。 父主题: 场景管理
突。示例中使用Python语言中的package作为自定义库。 自定义脚本 允许自定义除启动文件以外的自定义脚本文件,可根据实际所需编写。 自定义模型文件 自定义模型文件“xxx.pb”,需要通过编写自定义脚本加载并使用。自定义模型文件的存放位置及名称可自定义,可以将相关模型文件
模型进行模型微调后,调优后的模型会自动保存到模型仓库中。 上传模型需包含以下内容: 模型文件。 推理脚本,推理脚本命名为:customer_auto_label.py。 推理脚本所需依赖库。 新建模型仓库 在左侧菜单栏中单击“数据资产 > 模型管理”。 单击“新建模型仓库”,填写基本信息。
突。示例中使用Python语言中的package作为自定义库。 自定义脚本 允许自定义除启动文件以外的自定义脚本文件,可根据实际所需编写。 自定义模型文件 自定义模型文件“xxx.pb”,需要通过编写自定义脚本加载并使用。自定义模型文件的存放位置及名称可自定义,可以将相关模型文件
仿真服务可以提供基于云资源的大规模并行仿真。仿真过程中,涉及资源配置与调度。合理配置任务的资源占用,可以尽可能地提高资源利用率,进而提高仿真测试并行度,增加算法测试的里程数。 获取并配置算法实际资源占用 创建仿真算法时,需要填写算法镜像占用的CPU以及内存。这个将影响批量仿真子任务的资源调度
算法管理:用于对接客户的上云算法,并支持算法的版本级管理,并可自动化触发关联的批量算法。 评测管理:支持内置评测配置和自定义评测镜像,对仿真任务中的算法展开评测。 场景管理:包含场景、场景库、逻辑场景、逻辑场景库、测试用例、测试套件等。支持页面上传、泛化、在线仿真编辑等场景录入方式,支
允许自定义除启动文件以外的自定义脚本文件,可根据实际所需编写。 自定义模型文件。 自定义模型文件“xxx.pb”,需要通过编写自定义脚本加载并使用。自定义模型文件的存放位置及名称可自定义,可以将相关模型文件保存至子文件夹中,也可以保存至根目录下。 父主题: 模型文件说明(训练)
软硬件加速 感知算法训练和仿真需要使用大量算力资源,Octopus依托华为自研软硬件能力提供的强大算力支持,满足每天百万公里仿真测试和算法训练。 自动化标注 自动驾驶算法的持续提升依托于持续增加的高质量标注数据集,平台提供预标注范例模型,能对常用的物体如乘用车、大巴车、行人、骑行
deleteCasesFromSuit 创建测试用例 octopus createSimTestcases 更新测试用例 octopus updateSimTestcases 删除测试用例 octopus deleteSimTestcases 测试用例添加单个标签 octopus up
0/{project_id}/common/datasets { "name" : "数据集-数据仓库", "description" : "测试数据集-数据仓库", "label_format" : "OCTOPUS", "data_type" : "IMAGE", "dataset_form"
其他权限 团队管理员的其他管理权限步骤与平台管理员一致,具体请参考以下: 标注物管理请参考标注管理。 标注模板管理请参考模板管理。 标注脚本管理请参考脚本管理。 父主题: 团队管理员
标签筛选 在场景、逻辑场景和测试用例,以及添加场景、逻辑场景和测试用例时,可以通过标签筛选,快速筛选出场景或用例。 标签筛选 在左侧菜单栏中单击“仿真服务 > 场景管理”。 在页面中单击“标签筛选”。 在筛选框中输入内容,查找目标标签。也可在左侧标签树列表中选择目标标签。 勾选左
务时,基于分类标签体系,可快速筛选出符合评测任务需求的场景。 ODD筛选:每个自动驾驶系统运行的前提条件和适用范围可能不同,因此在进行场景测试时,对应的场景是属于自动驾驶系统设计运行域内至关重要。ODD(operational design domain,设计运行域)筛选提供按设