检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
图1 Octopus的使用流程 表1 使用流程说明 流程 子任务 说明 详细指导 数据准备 创建算子 基于您的业务数据,您可以在Octopus中创建数据处理的算子。 创建算子 数据批导 向Octopus平台导入原始数据包。
String 数据包状态 枚举值: CREATED(已创建) SCANNING(扫描中) NORMAL(导入完成) ABNORMAL(导入异常) PRE_DESENSITIZATION(待脱敏) IN_DESENSITIZATION(脱敏中) DESENSITIZATION_SUCCESS
id,配置算子时此项必填 resource_spec 是 String 资源规格,配置算子时此项必填,示例:1Core_4GiB。
数据处理 创建算子 批导数据 处理数据 父主题: 自动驾驶云服务全流程开发
请检查数据包状态 409 octopus.107005 There is already a running scenario job 已有场景作业正在运行中 请稍后再试 409 octopus.109002 The name of processor already exist 算子名称已存在
preprocessor: #转OpenData算子信息 id: 10105 # 算子id resource_spec: 4Core_8GiB
API 镜像仓库 镜像版本 数据集 数据集版本 数据仓库 数据仓库自定义属性 资源池信息管理 数据总览 数据包 数据导入 数据回放 作业管理 算子管理 作业队列 内部作业 数据场景 标签管理 仿真场景 场景地图
id,配置算子时此项必填 resource_spec 是 String 资源规格,配置算子时此项必填,示例:1Core_4GiB。
制作镜像(标注) Octopus平台依赖算子镜像内的/bin/bash、stdbuf、tee软件,请确保基础镜像内包含上述软件且能通过PATH找到。 Dockerfile示例 环境变量使用说明 父主题: 镜像仓库
AK/SK认证:通过AK(Access Key ID)/SK(Secret Access Key)加密调用请求。 Token认证 Token的有效期为24小时,需要使用一个Token鉴权时,可以先缓存起来,避免频繁调用。
权限和授权项 权限及授权项说明 镜像仓库 镜像版本 数据集 数据集版本 数据仓库 数据仓库自定义属性 集群信息管理 数据总览 数据包 数据导入 数据回放 作业管理 算子管理 作业队列 内部作业 数据场景 标签管理 仿真场景 场景地图
修订记录 发布日期 修订记录 2023-1-31 新增镜像仓库、镜像版本、数据集、数据集版本、数据仓库、数据仓库自定义属性、集群信息管理、数据总览、数据包、数据导入、数据回放、作业管理、算子管理、作业队列、内部作业、数据场景、标签管理相关操作接口。
object 元数据 表4 DataJobDetailPayload 参数 参数类型 描述 item DataJobDetailVo object 作业详情 表5 DataJobDetailVo 参数 参数类型 描述 id Long 作业id processor_id Long 算子
如果需要使用内置指标计算,则需满足以下条件: 自定义模型包中必须包含推理启动文件以及自定义模型文件,其中推理启动文件需要根据Octopus数据格式对推理结果存储为json进行适配,除此之外还可以包含一些其他必要的自定义脚本、自定义库、自定义算子库等。
octopus createDataProcessor 更新算子 octopus updateDataProcessor 删除算子 octopus deleteDataProcessor 创建算子作业 octopus createDataJob 更新算子作业 octopus updateDataJob
填application/json 表3 请求Body参数 参数 是否必选 参数类型 描述 queue_type 是 String 队列类型 枚举值: PROCESSOR(算子作业) INTERNAL(内部作业) RESIM(回放仿真作业) DESENSITIZATION(脱敏作业
填application/json 表3 请求Body参数 参数 是否必选 参数类型 描述 queue_type 是 String 队列类型 枚举值: PROCESSOR(算子作业) INTERNAL(内部作业) RESIM(回放仿真作业) DESENSITIZATION(脱敏作业
replay_job_status Integer 回放作业状态 枚举值: 1(未解析) 2(已完成) 3(解析失败) 4(未回放处理) 5(回放处理失败) processor_job_ids Array of longs 数据包处理作业id processor_ids Array of longs 数据包处理算子
取值为数据仓库id时表示以数据仓库数据作为作业输入,可以使用warehouse_filters字段对输入数据进行筛选 最大长度:64 processor_id 是 Long 算子id 最小值:1 resource_spec 是 String 资源规格,示例:1Core_4GiB。
failed_jobs object 失败作业信息 total_jobs_num total_jobs_num object 今日作业数量 表7 failed_jobs 参数 参数类型 描述 processor_jobs Array of DataTaskVo objects 算子作业