检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
SDK下载 请根据HiLens Framework固件版本号选择SDK软件包下载,如表1所示。HiLens Framework固件版本号请登录华为HiLens控制台,在“设备管理>设备列表”页面查看固件版本信息。 表1 SDK下载 固件版本 SDK下载 1.0.6及以下版本 请单击下载HiLens
如何使用Websocket调用实时语音识别 解决方案 1. 下载Java SDK 或 Python SDK,参考《SDK参考》中获取SDK章节。 2. 配置SDK环境,参考《SDK参考》中配置Java环境。 3. 使用SDK里的demo进行调用。
使用实时语音识别 前提条件 确保已按照配置CPP环境(Windows)配置完毕。 请参考SDK(websocket)获取最新版本SDK包。 初始化Client 初始化RasrClient,其参数包括AuthInfo。
使用实时语音识别 前提条件 确保已按照配置CPP环境(Linux)配置完毕。 请参考SDK(websocket)获取最新版本SDK包。
音频输入模块 输入模块简介 音频采集器 读取音频数据
参数名 说明 data 输出参数,存放读取到音频数据的智能指针。 size 输出参数,读取到音频数据的大小。 n 输入参数,一次读取音频帧数,最大不超过512。 返回值 成功返回0,失败则返回-1,失败时可通过日志查看原因。 父主题: 音频输入模块
音频采集器 本地音频文件 构造音频采集器,如果创建失败可以查看技能日志或输出来定位错误原因,本地麦克风使用默认参数采集数据,采样率44100,位宽16bit,双声道采集,每一帧采样点数1024。 接口调用 1.0.8及以上固件版本 static std::shared_ptr<AudioCapture>
输入模块简介 hilens::AudioCapture类 使用音频采集器来读取本地音频文件的数据,相关头文件已集成到“hilens.h”。 #include <hilens.h> 构造及析构函数 ~AudioCapture() virtual hilens::AudioCapture::~AudioCapture()
播放音频文件 播放本地AAC格式音频文件。在HiLens Kit设备的音频输出口接上耳机或者音箱,调用该接口时便可听到声音。 接口调用 HiLensEC PlayAacFile(const std::string filePath, int vol) 参数说明 表1 参数说明 参数名
Framework SDK提供的接口函数进行二次开发。 表1 文档导读 章节 说明 HiLens Framework_C++简介 快速了解HiLens Framework开发工具包。 环境准备 介绍使用HiLens Framework开发工具包的准备工作。 视频输入模块 音频输入模块 预处理
视频输入模块 输入模块简介 视频采集器 读取摄像头视频帧 获取视频的宽度 获取视频的高度
Framework框架 表1 模块说明 序号 模块 功能 1 Input Manager 负责视频、音频等输入数据的接入管理。 2 Media Processor 负责视频、音频等媒体数据的处理。 3 Model Manager 负责模型的初始化与推理任务。 4 Output Manager
输出模块 输出模块简介 构造用于输出的显示器 输出一帧图片 上传文件 上传缓冲区数据 发送POST请求 发送一条消息 播放音频文件
日志模块 设置打印日志的级别 打印Trace级别的日志 打印Debug级别的日志 打印Info级别的日志 打印Warning级别的日志 打印Error级别的日志 打印Fatal级别的日志
INIT_AENC_ERROR 音频编码初始化失败。 INIT_ADEC_ERROR 音频解码初始化失败。 INIT_AO_ERROR 音频输出初始化失败。 AUDIO_CHECK_ERROR 音频文件不支持。 AUDIO_SYSTEM_INIT_FAILED 音频系统初始化失败。
预处理 预处理模块简介 构造图像预处理器 改变图片尺寸 裁剪图片 转换图片颜色格式
初始化 初始化HiLens Framework 释放HiLens Framework
详细的编译指导请参考步骤6中的示例代码。 下载HiLens Framework SDK开发包:“cloud-c-sdk-HiLensFramework-1.0.4.tar.gz”,并解压,重命名文件名。 下载地址请参见SDK下载。 参考示例程序和接口调用说明进行代码开发,编译指导和示例代码说明,详见示例代码中的“README
准备工作 环境准备 SDK下载
模型管理 模型管理简介 创建模型 模型推理
模型推理 将数据输入模型进行推理,推理结束后将推理结果返回。 接口调用 virtual HiLensEC hilens::Model::Infer(const InferDataVec & inputs, InferDataVec & outputs) 参数说明 表1 参数说明 参数名
难例上传模块 难例上传介绍及说明 构造HardSample实例 初始化 难例图片判断 获取难例配置 更新难例配置
资源管理 获取模型路径 获得技能工作区目录 获得技能配置 下载OBS文件 计算文件的md5值 示例-资源管理