检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
问题描述 HiLens Kit设备硬件结构和Atlas500相似,请问HiLens Kit能使用Atlas500的开发方式进行开发吗?也就是HiLens Kit是否支持使用CANN部署应用。 问题解答 不支持直接用CANN,目前只能用HiLens提供的HiLens Framework框架。
Framework通过封装底层接口、实现常用的管理功能,让开发者可以在华为HiLens管理控制台上方便地开发技能,培育AI生态。 HiLens Framework的分层结构如图1所示,HiLens Framework封装了底层的多媒体处理库(摄像头/麦克风驱动模块Media_mini),以及D芯片相关的图像处理库
读取摄像头视频帧 该接口用于读取一帧视频。注意IPC摄像头和MP4视频返回的是YUV_NV21颜色排布的数据,而UVC类型的摄像头返回的是BGR颜色排布的数据。 接口调用 hilens.VideoCapture.read() 返回值 一帧视频数据。参数类型为numpy数组(dtype为uint8),兼容cv2。
获取模型路径 返回技能模型目录的路径。 对于技能代码包和模型分离的情况,模型会下载到特定目录,使用此函数来获取该路径。如果HiLens Framework没有获取模型所在目录,则返回当前路径。 接口调用 std::string hilens::GetModelDirPath() 返回值
AI处理器强大的处理能力,主要应用于AI开发者预研开发和视频监控领域。系统内置HiLens Framework,给运行的技能提供丰富的API接口。其具体参数请参见表1。该产品的具体介绍见华为云HiLens Kit 用户指南>产品简介。 表1 HiLens Kit参数说明 芯片 CPU
ns Framework的API。 下面是使用HiLens Framework获取摄像头内容并做简单处理的示例。 需要在开发技能时填写代码执行文件。 固件1.1.2及以后版本支持配置技能的Python依赖库。开发者在开发技能过程中,可根据自身需要配置技能的Python依赖库,详情请见配置技能的Python依赖库。
尺寸、存储及空间尺寸等。 app.rpm的打包,用户可以通过使用ModelBox的开发环境,将模型和业务逻辑代码等打包成相应的rpm包。 容器镜像 容器镜像格式是一个包含应用运行需要的各种组件和应用本身的镜像。可以使用ModelBox提供的软件包打包工具或者是镜像打包工具,也可以按照下面的格式手动打包。
仅可对处于“在线”状态(即运行状态)的设备卸载技能。处于离线状态(即非运行状态)的设备无法卸载技能。 卸载技能会删除端侧的技能和技能数据,请谨慎操作。 卸载技能 在“技能管理”界面中,进入“技能管理”界面,选择指定的技能,单击“操作”列的“卸载”。 图1 卸载技能 在弹出的对话框中,确认要卸载的技能信息,单击“确定”完成卸载操作。
华为HiLens平台的技能市场除了开发者分享的技能,也提供官方的预置技能供您购买使用。本章节主要介绍技能市场中预置的商用技能相关描述、基本信息、运行时配置参数和技能结果上传接口。 人脸检测技能:面向智慧商超的人脸采集技能。 多区域客流分析技能:面向智慧商超的客流统计技能。 车牌识别技能:面向智慧商超的车牌判断技能。
模型推理时,输出错误码17,是什么原因? 报错原因 输入的数据尺寸与模型要求的输入尺寸不一致,此时model.infer接口返回的是错误码,即int型的数字17。 解决措施 请检查您的模型输入和实际输入是否匹配,比如输入格式(YUV/RGB)、数据类型(float32/int8)。
Framework接口调用。 模型加密操作 下载加密工具:crypto_tool,并拷贝到设备系统的“/tmp”目录下,赋予执行权限: chmod +x crypto_tool 使用方法请参见工具的帮助信息: ./crypto_tool ./crypto_tool encode --model_file
买一个可用的技能,也可以在ModelArts AI Gallery订阅HiLens技能。 背景信息 购买技能需要一定的费用,在使用华为HiLens前检查账号状态,账号不能处于欠费或冻结状态。 技能可以分为“适用于Ascend芯片的技能”和“适用于海思35XX系列芯片的技能”,请仔
设备注册完成后,您可在华为HiLens平台的技能市场订购所需要的技能,拓展设备的AI能力。例如订购一个“人脸判断”技能,安装在设备上后,即可让设备具备判断人脸的能力。 登录专业版HiLens管理控制台,在左侧导航栏选择“产品订购>订单管理”。 默认进入“技能订单”页签。 单击右上角的“前往订购”。 进入
华为HiLens为端云协同多模态AI开发应用平台,提供简单易用的开发框架、开箱即用的开发环境、丰富的AI技能市场和云上管理平台,对接多种端侧计算设备,支持视觉及听觉AI应用开发、AI应用在线部署、海量设备管理等。 在调用华为HiLens服务的API之前,请确保已经充分了解华为HiLens服务相关概念,详细信息请参见产品介绍。
s Studio中通过编辑和调试技能逻辑代码,开发自己的技能。 当前技能项目已提供技能模板,可根据技能模板开发自己的技能代码,详情请见编辑逻辑代码。 编辑完技能逻辑代码后,HiLens Studio提供使用手机实时视频流调试代码的功能,以手机摄像头实时的视频流作为技能输入,查看技
设备列表”,进入“设备列表”页面。 单击已注册设备的“技能管理”,已部署的技能状态为“停止”,单击操作列的“启动”,并单击“确定”,确定启动技能运行在端侧设备上。 等待一会,当状态变为“运行中”,则技能成功运行在端侧设备上。同时,您也可以通过显示器查看技能输出数据。 已部署的技能状态说明如表1所示。 图1
设备注册后可在设备管理处进行管理,包括查看、注销设备,以及一键升级设备的固件版本等。 支持对设备下所安装的技能进行管理,包括查看、部署(安装)、卸载、启动和停止技能。 根据不同业务使用不同设备类型的资源限制,提供不同的端侧管理固件(HiLens Agent)版本,更符合业务场景需求。
训练得到模型之后,整个开发过程还不算结束,需要对模型进行评估和考察。一次性很难获得一个满意的模型,需要反复的调整算法参数、数据,不断评估训练生成的模型。 一些常用的指标,如精准率、召回率、F1值等,能帮助您有效的评估,最终获得一个满意的模型。 前提条件 已在华为HiLens控制台选择“H
ModelArts是面向AI开发者的一站式开发平台,您可以使用ModelArts开发一个用于华为HiLens平台的算法模型,然后基于您自定义的算法模型和逻辑代码新建技能。 本章节提供了一个手势识别技能的样例,介绍从模型训练到查看技能效果,新建一个全新技能的全流程,帮助您快速熟悉华为HiLens技能开发的使用过程。
Lens Kit的注册、管理和注销。下文所有操作,仅针对HiLens设备(Windows、Atlas 500、通用x86设备、通用ARM设备、SDC等设备类型)、HiLens Kit。 在进行设备管理之前,您需要将端侧设备注册至华为HiLens中,其相应的说明和连接指导请参见注册HiLens设备。