检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如何查看Octopus与OBS桶是否在同一区域? 在使用Octopus各功能时,如创建训练作业、创建数据集等,涉及到需要指定OBS目录时,都需要保证此OBS桶与Octopus在同一区域。 查看OBS桶与Octopus是否在同一区域 查看创建的OBS桶所在区域。 登录OBS管理控制台。
模型评测 在机器学习中,通常需要使用一定的方法和标准,来评测一个模型的预测精确度。自动驾驶领域通常涉及目标检测、语义分割、车道线检测等类别,如识别车辆、行人、可行区域等对象。 评测脚本 评测任务 任务队列 评测对比 模型数据集支持 父主题: 训练服务
登录Octopus服务平台,在左侧菜单栏中单击“数据资产 > 数据总览”。 图1 数据总览 表1 总览页面说明 序号 区域名称 说明 1 采集数据统计 平台数据量的统计信息,并图形化展现历史数据趋势。 2 今日任务状态监控 统计并显示当日算子作业,回放仿真,内部作业的总量及异常数量,以列表形式展示异常任务名称。
八爪鱼自动驾驶平台的多机分布式训练功能可以帮助用户加快模型训练速度,提高训练效率,并支持更大规模的深度学习任务。通过多机分布式训练,用户可以将训练任务分配到多台计算机或服务器上并行进行,充分利用硬件资源,加快模型收敛速度,提高训练效果。平台支持多种深度学习框架,如TensorFlow、PyTorch等,并提供简单易用
topus平台上。 对象存储导入数据:用户需先将数据包上传至对象存储桶(可自定义)中,再导入到Octopus平台。上传速率快,适合上传大数据量(超过2G)的数据包。 单个数据包时长均不可超过10分钟。 目前MP4文件只支持对象存储导入。 数据导入任务的流程如下: 图1 数据导入任务流程
图6 选择仿真任务 单击“确定”,界面出现上次任务的敏感性分析结果,展示每个参数的灵敏度参数,该值的范围在[0,1],该值越大,说明该参数的变化对评测分数的影响越大。 图7 泛化参数 用户可根据敏感性分析结果,设置当前各项参数的数值。 泛化任务队列管理 用户可以对泛化任务进行优先级排序。
算子基本信息 处理算子:根据需要选择数据脱敏算子。 资源规格:选择合适的资源规格。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 环境变量:配置算子的环境变量。允许添加的环境变量个数不超过10个。 Key:只能由英文、数字、和特殊符号(,-_)组成,且需要以字母开头
objects 近30天数据量统计 total_storage_size Long 采集总数据量,单位(byte) 表13 DataDailyDataSize 参数 参数类型 描述 date String 日期,示例:2020-01-01 size Long 数据量,单位(byte) 表14
在使用数据合规脱敏能力之前,需先开通合规脱敏服务。合规脱敏支持人脸,车牌,点云,GNSS,高程脱敏能力。开通合规脱敏服务后,会根据处理脱敏数据量按需计费,您可以在费用中心查询费用账单。 开通服务 登录Octopus服务平台,在左侧菜单栏中单击“总览”。 单击按需服务区域,合规脱敏产品操作列的“开通服务”。
资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 环境变量:配置算子的环境变量。允许添加的环境变量个数不超过10个。 Key:只能由英文、数字、和特殊符号(,-_)组成,且需要以字母开头
) UPDATE_AT_DESC(更新时间降序) STORAGE_SIZE_ASC(数据量升序) STORAGE_SIZE_DESC(数据量降序) is_recycle 是 Boolean 是否已回收 data_source 否 String 传输方式 枚举值: OBS(对象存储)
输入文件不存在 请检查输入数据是否存在 创建容器配置失败 请尝试重启作业 镜像拉取失败 请检查镜像是否已上传 无效镜像 请检查镜像是否正确 容器启动异常 请尝试重启作业 创建容器失败 请尝试重启作业 未选择数据仓库 请重新创建作业并指定数据仓库 数据包不存在 请检查数据包是否存在 资源不可用,请检查资源规格
资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 环境变量:配置算子的环境变量。允许添加的环境变量个数不超过10个。 Key:只能由英文、数字、和特殊符号(,-_)组成,且需要以字母开头
ng-jobs/batch-update 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String
警告标志前行为(Warning Sign)检测 警告类交通标志前行为检测的目的是判断主车在各种警告类标志前行为是否合理,主要包括两个方面的检测: 在警告类标志前车速是否太大 在警告类标志前是否有明显的加速行为 本设计认为当主车的车速大于或者加速度大于时,警告类标志前行为检测不通过。 该指标关联的内置可视化时间序列数据为:暂无。
数据目录、数据类型、标定项ID、数据格式、数据量。 数据处理 可查看此数据包关联的数据处理作业,单击作业ID,可跳转至作业处理界面。 收集信息 车辆名称、标定ID、驾驶模式、采集站点、驾驶路线、采集时间、和总数据量以及各类传感器采集的数据量。 如果数据包异常,一般是由于与数据包同名
资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 数据类型:选择“数据包”。 选择数据:选择需要操作的数据包中的数据。 输出目录:选择可输出的通用存储的名称。 单击“创建”,
0/{project_id}/data/jobs 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String
资源规格:当前项目中可用的资源规格,资源规格需要平台管理员在运维配置纳管标注任务用途(人工标注)的作业集群后创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 任务类型为预标注时: 图4 预标注 任务类型:有人工标注和预标注两种。预标注创建需排队,排队详情请在任务列表界面筛选状态为“队列中”进行查看,此处以预标注为例。
资源规格:当前项目中可用的资源规格,资源规格需要平台管理员在纳管模型编译用途的任务作业集群后创建。 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 选择镜像。 图2 选择镜像 编译镜像:需提前在"编译镜像"中创建成功,编译镜像创建请参考创建编译镜像。 环境变量:由编译镜