检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
标注:通过现有的标注任务,快速创建新的数据集。 OBS:支持从对象存储服务(OBS)中导入数据集。 需提前将数据集上传至OBS,并获取对应的访问密钥、私有访问密钥和OBS地址。 通用存储:可以从八爪鱼通用存储服务导入数据集。 数据集:基于现有数据集,创建子集。 创建数据集步骤 创建
注册华为账号并开通华为云 在使用华为云服务之前您需要申请华为云账号并进行实名认证。通过此账号,您可以使用所有华为云服务,并且只需为您所使用的服务付费。 如果您已有一个华为云账号,请跳到下一个任务。如果您还没有华为云账号,请参考以下步骤创建。 打开华为云官网,单击“注册”。 根据提
场景挖掘 平台支持基于内置场景挖掘算法和场景识别大模型挖掘的能力,对数据包进行场景挖掘。具体操作步骤如下: 在左侧菜单栏中,选择“数据资产 > 源数据包”。 选择“数据包”页签,执行场景挖掘。 勾选需要内置场景挖掘的数据包,单击“场景挖掘”。 单击操作栏中的“详情”,进入数据包详情,单击“场景挖掘”。
数据仓库自定义属性 表1 数据仓库自定义属性权限 权限 对应API接口 授权项(Action) IAM项目 (Project) 企业项目 (Enterprise Project) 获取数据仓库自定义属性列表 GET /v1.0/{project_id}/common/wareho
TARGET_RESULT_DIR="/tmp/…/result/data" 预标注日志文件目录 TARGET_LOG_DIR="/tmp/…/result/log" 推理服务 模型版本文件目录 OCTOPUS_MODEL="/home/mind/model" 父主题: 制作镜像(训练)
使用IAM账号登录华为云。 在页面左上方单击“控制台”,进入华为云管理控制台。 在控制台右上角的账户名下方,单击“统一身份认证”,进入“统一身份认证服务”页面。 查找用户,单击用户名进入用户详情,查看用户所属用户组。 单击用户组,查看用户组授权记录。 单击权限,查看具体的权限策略内容。 父主题:
Dockerfile示例 用户可使用命令行模式或Dockerfile模式进行构建。 数据集镜像不支持调用GPU资源。 以数据集自定义镜像为例,一般的镜像制作Dockerfile示例如下: # 载入基础镜像,用户可根据数据集处理任务的实际需要选择合适的镜像环境,例如ubuntu:latest
自定义评测镜像制作 Octopus仿真服务平台定义了一些proto接口,用于支持用户自定义评测等功能。这些自定义功能通常以镜像的形式上传到云仿真平台,然后参与到业务运行流程中。 本文档对常见业务功能的镜像制作进行指导说明。 自定义评测镜像涉及的样例代码,如有需要,请联系相关人员。
修改场景地图文件 功能介绍 此接口用于修改场景地图文件。场景地图文件上传后,调用该接口修改"ready"字段为"true",完成场景地图创建。 URI PATCH /v2/{project_id}/sim/sm/maps/{parent_lookup_id}/files/{sha256}
查看源数据包 原始数据包含车辆采集的各类传感器数据信息,数据导入任务创建完毕后,平台对数据包进行扫描,此模块展示导入成功的数据包。 数据包列表 在左侧菜单栏中,选择“数据资产 > 源数据包”。 在“数据包”页签,默认显示数据包列表。 单击列表右上角,可切换至图片视图。 表1 图表视图相关操作
OCTOPUS数据集格式说明 图片标注数据集文件说明 点云标注数据集文件说明 音频标注数据集文件说明 文本标注数据集文件说明 父主题: 数据集
环境变量使用说明 镜像运行时,会向运行环境注入部分默认文件配置: 表1 环境变量说明 任务名称 文件名 环境变量 预标注任务 待标注数据集目录 OCTPS_DATASET_DIR="/tmp/…/data" 模型仓库中的模型算法目录(非内置) OCTPS_MODEL_DIR="/
如何获取访问密钥AK/SK? 问:如何获取访问密钥AK/SK。 答: 使用IAM账号登录华为云。 在页面左上方单击“控制台”,进入华为云管理控制台。 在控制台右上角的账户名下方,单击“我的凭证”,进入“我的凭证”页面。 在“我的凭证”页面,选择“访问密钥>新增访问密钥”。 填写该
预审核模型文件 预审核模型完成对已标数据的审核,并将审核结果和审核所用的审核规则按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的审核结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件
场景挖掘作业(数据标记) 作业输入输出规范 用户完成自定义场景挖掘镜像上传后,在运行作业容器时,Octopus平台会向作业容器中注入以下环境变量: rosbag_path: 作为数据源的rosbag存放路径,例如/tmp/data/20220620.bag output_dir:
与datahub对接的算法镜像制作 图1 算法镜像 如上图所示,算法与仿真平台datahub通过grpc连接,通过接收osi数据作为输入,并将算法内部信号输出到datahub。 仿真平台可以生成仿真的osi和算法pb,用于3d回放展示和算法的白盒化评测。 具体grpc连接data
预标注模型文件 预标注模型完成对数据的推理,并将推理结果按照规定格式放在指定路径中。 模型文件基本要求 自定义模型包通过环境变量获取数据集路径和推理结果存放路径,将每帧数据的推理结果按照规定格式存入规定路径的json文件中。 自定义模型包中必须包含启动文件。除此之外,还可包含一些
内置场景挖掘规则 内置场景挖掘算法都是基于规则进行片段挖掘。平台支持的内置场景挖掘规则如下: 道路---道路环境---高速 检验规格: 包含高精地图信息 主车行驶区域road级别type为motorway 道路---道路环境---城市快速路 检验规格: 包含高精地图信息 主车行驶
数据提取作业(数据集) 作业输入输出规范 Input 平台会以环境变量的形式提供以下参数: rosbag_path: rosbag路径,以.bag结尾。 output_dir:最终输出数据集路径。 tmp_dir:供用户存储临时文件的目录。 task_content_json:人
环境变量使用说明 镜像运行时,会向运行环境注入部分默认文件配置: 表1 环境变量说明 任务名称 文件名 环境变量 数据集任务 数据集待筛选数据目录 OCTPS_DATASET_DIR 数据集筛选结果数据目录 TARGET_RESULT_DIR="/tmp/…/result/data"