检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
终端节点 终端节点即调用API的请求地址,不同服务不同区域的终端节点不同。 Octopus自动驾驶云服务的终端节点如下表所示,请您根据业务需要选择对应区域的终端节点。 表1 自动驾驶云服务的终端节点 区域名称 区域 终端节点(Endpoint) 华北-乌兰察布-汽车一 cn-north-11
通用存储 创建存储目录 在左侧菜单栏中,单击“数据资产 > 通用存储”。 选择“通用存储”页签,单击“创建存储目录”,填写基本信息。 图1 创建存储目录 单击“确定”,通用存储列表可查看新建通用存储。 通用存储相关操作 在“通用存储”列表,还可以完成以下操作。 表1 通用存储相关操作
通用存储 通用存储 自定义属性 父主题: 数据资产
数据。 OBS简介 对象存储服务OBS是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力。对象存储服务OBS的基本组成是桶和对象。桶是OBS中存储对象的容器,每个桶都有自己的存储类别、访问权限、所属区域等属性,用户在互联网上通过桶的访问域名来定位桶。对象是OBS中数据存储的基本单位。
群提供多种节点的混合部署,基于高性能网络模型提供全方位、多场景、安全稳定的容器运行环境,平台可以将集群统一纳管,更方便查看节点资源使用量和修改节点用途,以及设置资源规格。其中,cce-user-job集群需强制纳管以适配资源规格。如果用户直接通过后台操作k8s集群及节点造成环境错乱,则需承担责任。
ttl格式文件可参考导出已有的标签树文件。 .ttl文件规格不大于200kb,标签数量不大于500个。 根节点的名称必须是唯一的,标签树中同一父节点下不能有同名标签,且根节点数量不超过10个。 标签管理相关操作 在“标签管理”界面,还可以进行以下操作。 表1 标签管理相关操作 任务
支持20个在线标注用户数。 存储扩容包 自动驾驶数据管理缓存扩容包 当SFS存储剩余容量不足时,购买自动驾驶数据管理缓存扩容包增加SFS存储容量。 自动驾驶数据管理存储扩容包 当OBS存储剩余容量不足时,购买自动驾驶数据管理缓存扩容包增加OBS存储容量。 通用处理节点 octopus计算型CPU(16u32g)专属实例
资源管理 集群纳管详情中展示集群的节点资源和资源规格分配情况。给节点增加标签,确认节点的用途,在资源规格中,给各个资源用途分配资源规格,支撑任务执行。资源不足时,用户需要单独购买扩展资源包。 用平台管理员账号登录Octopus平台。 在左侧菜单栏中单击“运维配置 > 集群纳管 ”。
行仿真节点,完成日行百万公里虚拟里程。 合规性 脱敏算子对数据包进行脱敏处理(包括人脸、车牌、gnss高程),保证用户数据上传的合规性,避免个人隐私泄露,保护用户的数据信息和财产安全。 昇腾云助力 昇腾云具有稳定安全的底层算力,提供极致性价比。昇腾双栈AI算力,支持万节点计算集群
到期前的重复购买。 合规服务依赖数据服务,在购买合规云服务-基础版前,需先购买数据云服务-基础版。 单击“下一步”,购买存储扩容包、通用处理节点和AI处理节点,请详见购买扩展资源包。 单击“下一步:确认配置”,并勾选“我已阅读并同意《八爪鱼自动驾驶云服务声明》”。 图3 确认配置
获取项目ID的接口为“GET https://{Endpoint}/v3/projects”,其中{Endpoint}为IAM的终端节点,可以从地区和终端节点获取。 接口的认证鉴权请参见认证鉴权。 响应示例如下,其中projects下的“id”即为项目ID。 { { "projects":
自定义属性 数据处理只能识别带有标签的文件数据,进入通用存储后,用户可以给通用存储中的文件添加key-value映射关系的自定义属性。 创建自定义属性 在左侧菜单栏中,单击“数据资产 > 通用存储 ”。 选择“自定义属性”页签,单击“创建自定义属性”,填写基本信息。 图1 创建自定义属性
S桶中。 数据缓存:提供专用高速文件存储功能,加速训练和评测读取数据集的速度。 模型管理:负责对模型仓库和模型版本进行各种操作,模型仓库可包含多个模型版本,支持上传符合平台规范的模型用于标注或训练任务。 通用存储:支持创建通用存储,用于数据存储。 地图管理 在地图管理中上传的高精
优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 数据类型:选择“通用存储”。 选择存储目录:选择需要操作的通用存储中的数据。 输出目录:选择可输出的通用存储的目录。 单击“创建”, 在作业总览页面可查看创建好的作业。 创建作业(数据场景) 在左侧菜单栏中,单击“数据处理
多模态检索 存储费用 存储费用是指使用Octopus时,在对象存储服务(OBS)存储数据产生的费用。 表6 存储计费项说明 计费项 计费模式 计费说明 计费公式 对象存储(OBS) 包年/包月、按需计费 Octopus使用OBS存储数据,产生的费用。 具体费用可参见对象存储价格详情。
自动驾驶云服务中,为了最大化资源利用率,租户的子用户可以共享计算资源用于运行容器化的作业。这意味着租户的不同子用户的容器化处理作业可以运行在同一个计算节点上,共享节点的CPU、内存、磁盘、操作系统内核等资源,这里就会存在容器逃逸的风险。 自动驾驶云服务适用于您的子用户是可控的、可信任的场合,不适用
优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。 计算节点:用于运行训练任务的训练节点个数。 上传模型节点:选择用特定节点上传训练模型,默认使用node-0(主节点)作为上传产物节点。 选择算法。 图2 选择算法 训练算法:根据业务所需选择算法,自定义算法需提前在“训练服务
请检查输入参数并重试 409 octopus.101002 Node In Use 节点使用中 请检查节点 409 octopus.101003 Level Exceed Limit 节点层级超过限制 请尝试其他节点 409 octopus.101005 Tag Name Already Exists
考虑提升集群节点的CPU或者内存配置。例如:图1显示CPU最大12.19,如果算法占用15核,那么当前集群是无法满足调度的,需要提升集群节点配置。 图1 创建仿真算法 并行仿真任务资源利用说明 当前批量仿真任务同一用户仅允许同时运行一个批量仿真任务。假设有一个4节点的集群,某个任
双击任一图例:显示全部资源占用折线图。 单击指定图例:只显示该图例折线图。 此模块也可显示多个计算节点运行任务时,资源占用的情况。 如果选择2个计算节点运行任务,则可选择查看单个节点资源占用情况。 资源占用情况功能模块,需要用户在制作自定义镜像时安装psutil与pynvml,参考命令如下: