检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
模型文件说明(标注) 模型文件可用于预标注任务、预审核任务。不同任务所需的模型文件要求不同。 预标注模型文件 预审核模型文件 父主题: 模型管理
模型文件说明(训练) Octopus模型管理模块,支持用户上传模型,并将其用于模型评测、模型编译任务。如果需要将模型用于内置评测模板评测,除模型文件外,需另外包含推理启动文件: customer_inference.py 仅当需要使用内置评测指标计算时需要添加推理启动文件,文件名称可自定义,将该文件置于模型目录下。
Dockerfile示例 一般情况下,引擎主要包含预标注算法或预审核算法运行所需要的基本依赖环境,用户也可将预标注算法或预审核算法包内置在镜像仓库的镜像中。 用户可使用命令行模式或Dockerfile模式进行构建。 以预标注自定义镜像为例,一般的镜像制作Dockerfile示例如下:
作业队列 平台为脱敏作业提供作业队列的功能,用户可在此查看任务队列,同时支持对任务优先级的调整。 其他租户的队列作业不允许操作。 在左侧菜单栏中单击“数据合规”。 选择“数据脱敏 > 作业队列”页签,可查看作业。 父主题: 数据脱敏
回收站 Octopus平台支持用户删除数据包,执行删除操作的数据包将暂存回收站,等待用户可根据项目情况及时恢复或永久删除。具体操作参考如下: 在左侧菜单栏中,选择“数据资产 > 源数据包”。 在“数据包”页签,选择指定数据包操作栏内的“更多 > 删除”,根据界面提示删除数据包,删除后的数据包将放入回收站。
使用账号登录华为云。 在页面左上方单击“控制台”,进入华为云管理控制台。 在控制台右上角的账户名下方,单击“统一身份认证”,进入“统一身份认证服务”页面。 查找用户。 单击用户名进入用户详情,查看用户所属用户组。 单击用户组,查看用户组授权记录。 单击权限(以Octopus Full
注册华为账号并开通华为云 在使用华为云服务之前您需要申请华为云账号并进行实名认证。通过此账号,您可以使用所有华为云服务,并且只需为您所使用的服务付费。 如果您已有一个华为云账号,请跳到下一个任务。如果您还没有华为云账号,请参考以下步骤创建。 打开华为云官网,单击“注册”。 根据提
场景挖掘 平台支持基于内置场景挖掘算法和场景识别大模型挖掘的能力,对数据包进行场景挖掘。具体操作步骤如下: 在左侧菜单栏中,选择“数据资产 > 源数据包”。 选择“数据包”页签,执行场景挖掘。 勾选需要内置场景挖掘的数据包,单击“场景挖掘”。 单击操作栏中的“详情”,进入数据包详情,单击“场景挖掘”。
自定义评测镜像制作 Octopus仿真服务平台定义了一些proto接口,用于支持用户自定义评测等功能。这些自定义功能通常以镜像的形式上传到云仿真平台,然后参与到业务运行流程中。 本文档对常见业务功能的镜像制作进行指导说明。 自定义评测镜像涉及的样例代码,如有需要,请联系相关人员。
预审核模型文件 预审核模型完成对已标数据的审核,并将审核结果和审核所用的审核规则按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的审核结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件
场景挖掘作业(数据标记) 作业输入输出规范 用户完成自定义场景挖掘镜像上传后,在运行作业容器时,Octopus平台会向作业容器中注入以下环境变量: rosbag_path: 作为数据源的rosbag存放路径,例如/tmp/data/20220620.bag output_dir:
在“作业总览”页签,针对算子作业还可以完成以下操作。 表1 作业总览相关操作 任务 操作步骤 作业详情 单击操作栏中的“详情”,可查看作业的详情和日志信息。当作业出现异常时,请参见表2分析定位问题。 重启作业 单击操作栏中的“重启”,可根据需要保持或修改资源规格(默认显示当前资源规格),将目标作业进行重启。
如何查看账号ID和IAM用户ID? 使用IAM账号登录华为云。 在页面左上方单击“控制台”,进入华为云管理控制台。 在控制台右上角的账户名下方,单击“我的凭证”,进入“我的凭证”页面。 在API凭证页面获取IAM用户名、用户ID、账号名和账号ID。 父主题: 其他常见问题
数据提取作业(数据集) 作业输入输出规范 Input 平台会以环境变量的形式提供以下参数: rosbag_path: rosbag路径,以.bag结尾。 output_dir:最终输出数据集路径。 tmp_dir:供用户存储临时文件的目录。 task_content_json:人
环境变量使用说明 镜像运行时,会向运行环境注入部分默认文件配置: 表1 环境变量说明 任务名称 文件名 环境变量 数据集任务 数据集待筛选数据目录 OCTPS_DATASET_DIR 数据集筛选结果数据目录 TARGET_RESULT_DIR="/tmp/…/result/data"
与数据包同名的yaml配置文件说明 数据包中必须含有与数据包同名的yaml配置文件主要包括车辆名称、传感器信息和标定ID等信息,详情参考如下: # 华为八爪鱼自动驾驶云服务数据采集说明 project: '项目名称' module: '感知' cardrive: collect_time: 2020-
与数据包同名的yaml配置文件说明 数据包中必须含有与数据包同名的yaml配置文件主要包括车辆名称、传感器信息和标定ID等信息,详情参考如下: # 华为八爪鱼自动驾驶云服务数据采集说明 project: '项目名称' module: '感知' cardrive: collect_time: 2020-
文本标注数据集文件说明 OCTOPUS格式文件基本要求(文本标注) 上传的OCTOPUS格式数据集需包含以下文件(以txt格式为例)。文本文件支持的格式包含:txt、yaml、xml、csv。 . ├─ 文件夹1 ├─ text1.txt #文本文件
时间匹配。 数据名称仅包含中文、大小写英文、数字、“-”“_”,不超过64位。 数据包名称仅包含中文、大小写英文、数字、“-”“_”,不得出现其他字符,且长度不超过64个字符。 “Octopus_data_collection.yaml”配置文件说明 数据包中必须含有“Octopus_data_collection
新建Notebook”会选不到kernel。 具体步骤可参考在Notebook中添加自定义IPython Kernel。 不满足以上镜像规范,所制作的镜像可能会出现故障。常见故障排查: 用户自定义镜像没有ma-user用户及ma-group用户组; 用户自定义镜像中/home/ma-user目录,属主