检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
算法描述:不得包含“@#$%^&*< > \”特殊字符,不得超过255个字符。 镜像选择:下拉选择仿真算法镜像。 如果镜像仓库中的算法镜像已被其他仿真算法引用,需要在镜像仓库中重新创建算法镜像。 配置运行环境 图2 配置运行环境 运行命令:输入运行算法的命令,具体命令根据仿真算法镜像启动脚本确定。示例命令如:bash
桶名(数据集来源为OBS时必填) warehouse_params 否 WarehouseParam object 数据仓库筛选数据参数(数据集来源为数据仓库时必填) custom_image 否 String 自定义镜像名称,形如"自定义镜像id:自定义镜像版本号" command
只有音频。 图2 文件详情 查询仓库数据 可选择属性筛选,或输入关键字搜索数据。 导出仓库数据 可选择仓库数据导出至本地或OBS桶中,具体请参考导出仓库数据。 删除仓库数据 勾选单个或多个仓库数据,单击列表上方的“删除”,可删除单个或多个仓库数据。 文件类型包含以下几种: 表3
表1 使用流程说明 流程 子任务 说明 详细指导 镜像仓库 镜像仓库 平台为用户提供了自定义镜像功能,为了方便用户对镜像进行统一管理,平台设置了镜像仓库管理。 创建镜像仓库 仿真服务 算法管理 在创建任务前,需要创建算法,用户可从本地上传容器镜像。 创建仿真算法 评测管理 支持内置评
数据集:支持数据集多版本管理和统计。同时支持用户将本地符合平台规范的数据集导入平台,以及将平台上的数据集导出到自有OBS桶中。 数据缓存:提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 模型管理:负责对模型仓库和模型版本进行各种操作,模型仓库可包含多个模型版本,支持上传符合平台规范的模型用于标注或训练任务。
Explorer能根据需要动态生成SDK代码功能,降低您使用SDK的难度,推荐使用。 SDK列表 表1提供了Octopus服务支持的SDK列表,您可以在GitHub仓库查看SDK更新历史、获取安装包以及查看指导文档。 表1 SDK列表 编程语言 Github地址 参考文档 Java huaweicloud-sdk-java-v3
评测描述:不得包含“@#$%^&*< > \”特殊字符,不得超过255个字符。 评测类型:选择“自定义评测镜像”。 评测镜像:选择在镜像仓库中创建好的评测镜像。 评测模式:选择“实时评测”和“延时评测”。详情请参考实时评测和延时评测介绍。 以上信息填写无误后,单击“确认”。仿真评测创建成功。
请检查镜像是否已上传 无效镜像 请检查镜像是否正确 容器启动异常 请尝试重启作业 创建容器失败 请尝试重启作业 未选择数据仓库 请重新创建作业并指定数据仓库 数据包不存在 请检查数据包是否存在 资源不可用,请检查资源规格 请检查资源规格是否可用 场景片段不存在或源文件不存在 请选择其他场景片段
镜像版本 获取镜像仓库版本列表 创建镜像仓库版本 获取镜像仓库版本详情 删除镜像仓库版本 更新镜像仓库版本状态 创建镜像仓库版本操作账号 父主题: API
创建镜像仓库 用平台管理员账号登录Octopus平台。 在左侧菜单栏中,单击“镜像仓库 ”。 单击“新建”,填写基本信息。 图1 创建镜像仓库 名称:输入镜像仓库的名称,只能包含数字、英文、中文、下划线、中划线。 用途:根据需求,下拉框选择用途。 描述:简单描述镜像仓库,最大长度为255。
表1 API概览 类型 说明 镜像仓库 包括获取镜像仓库列表、创建镜像仓库、修改镜像仓库、删除镜像仓库的接口。 镜像版本 包括获取镜像仓库版本列表、创建镜像仓库版本、获取镜像仓库版本详情、删除镜像仓库版本、更新镜像仓库版本状态、创建镜像仓库版本操作账号的接口。 数据集 包括获取
(Enterprise Project) 获取镜像仓库版本列表 GET /v1.0/{project_id}/common/image-registry/image-repos/{id}/versions octopus:imageRepo:list √ √ 创建镜像仓库版本 POST /v1.0/{
2023-1-31 新增镜像仓库、镜像版本、数据集、数据集版本、数据仓库、数据仓库自定义属性、集群信息管理、数据总览、数据包、数据导入、数据回放、作业管理、算子管理、作业队列、内部作业、数据场景、标签管理相关操作接口。 新增Common-SDK错误码、镜像仓库错误码、数据服务错误码、数据集服务错误码。
数据集:支持数据集多版本管理和统计。同时支持用户将本地符合平台规范的数据集导入平台,以及将平台上的数据集导出到自有OBS桶中。 数据缓存:提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 模型管理:负责对模型仓库和模型版本进行各种操作,模型仓库可包含多个模型版本,支持上传符合平台规范的模型用于标注或训练任务。
API 镜像仓库 镜像版本 数据集 数据集版本 数据仓库 数据仓库自定义属性 资源池信息管理 数据总览 数据包 数据导入 数据回放 作业管理 算子管理 作业队列 内部作业 数据场景 标签管理 仿真场景 场景地图
描述:简要描述算法,不包含“@^\#$%&*<>'|"/”,不得超过256个字符。 选择镜像仓库和样本类型。 训练算法创建后,“镜像”“样本类型”不再支持修改,请认真填写。 图2 选择镜像仓库和样本类型 镜像:请选择镜像和版本。 共享级别:可选择个人、团队。 个人:当前操作用户。 团队:当前工作空间下被授权的用户。
在作业总览中平台支持创建数据标记,数据图表、数据回放、数据集等作业,数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 当选择数据集算子时,数据类型可支持选择通用存储。 创建作业 在左侧菜单栏中,单击“数据处理 > 数据处理”。 选择“作业总览”页签,单击“创建作业”。
权限和授权项 权限及授权项说明 镜像仓库 镜像版本 数据集 数据集版本 数据仓库 数据仓库自定义属性 集群信息管理 数据总览 数据包 数据导入 数据回放 作业管理 算子管理 作业队列 内部作业 数据场景 标签管理 仿真场景 场景地图
PUBLIC(公开) image_repo_id 是 Integer 镜像仓库id,通过“获取镜像仓库列表”接口获取 最小值:1 image_version 是 Integer 镜像仓库版本号,通过“获取镜像仓库版本列表”接口获取 最小值:1 config 是 DataProcessorConfigRequest
USER_DEFINE(自定义格式) data_source 否 String 枚举值: LABEL(标注任务) LOCAL(本地) OBS HOUSE(数据仓库) DATASET(数据集) owner 否 String 数据集类型 枚举值: CUSTOMER(自定义数据集) SYSTEM(内置数据集)