《2022年孤立汉语数字语音识别系统.docx》由会员分享,可在线阅读,更多相关《2022年孤立汉语数字语音识别系统.docx(6页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、精品学习资源孤立汉语数字语音识别系统摘要: 本文通过提取声音信号的Mel 倒谱系数作为特点,利用动态时间规整技术实现匹配算法,实现了特定人孤立汉语数字语音的识别,并利用Matlab 编写了简洁的图形用户界面;关键词: 语音识别; MFCC ;DTW一、引言语言是人类所特有的最重要最自然的沟通工具,也是人类信息的重要来源之一;让机器拥有“听懂”人类口述语言的才能,将使得人与电脑之间的沟通变得 更为便利快捷;自从 1952 年 AT&T 贝尔试验室的开发出能识别十个英文数字的Audry 系统以来,语音识别技术已经得到了飞速进展,其中IBM 、Microsoft 、Apple 等公司在语音识别技术有
2、用化上的巨资投入也使得这项技术在日常生活中得到广泛应用; 电脑技术的进展大大促进了数字信号处理技术的开发与应用,也使得更多的技术应用在语音识别方面;MATLAB 是一种功能强大、 效率高、交互性好的数值运算和可视化电脑高级语言, 它将数值分析、 信号处理和图形显示有机地融合为一体, 使得技术人员可以在较短的时间里对自己的想法进行试验验证;本文就是在MATLAB 基础上进行汉语数字语言识别的图形用户界面开发与程序设计的;二、语音识别系统概述针对不同的任务,语音识别系统也可以采纳对应的多种设计方案,但其大致 的结构和模型思想基本上是相同的;语音识别系统本质上是一种模式识别系统, 它包括了特点提取、
3、 模式匹配、 参考模型库这三个基本单元; 典型系统的基本结构如图 1 所示;欢迎下载精品学习资源语音输入语言信号识别欢迎下载精品学习资源预处理特点提取模式识别识别结果欢迎下载精品学习资源训练模型库图 1 典型语音识别系统目前常用的技术有特点参数匹配法、隐马尔科夫法和神经网络法;其中语音 特点参数可以是能量、基音频率、过量率、共振峰值等,目前常用的参数为基于 发声声道特点模型, 通过线性猜测分析的线性猜测倒谱系数LPCC 和基于人耳的听觉机理,反映听觉特性,模拟人耳对声音频率感知的梅尔倒谱系数MFCC 等;MFCC 的频率特性反映了人耳的听觉特性, 因而在用于代替人耳来分析语音时,其性能和鲁棒性
4、比较符合实际听音成效; 与 LPCC 相比, 不依靠于全极点语音产生模型的假定,抗噪才能较强;本系统也将使用MFCC 参数作为语音识别的主要特点参数;欢迎下载精品学习资源三、语音信号的分析与处理1 信号采集本试验直接用电脑的声卡进行语音信号的数字化采样量化处理;依据奈奎斯特采样定理, 采样频率必需到达信号的两倍带宽以上时, 才不会发生频域上的混叠失真, 能够从采样信号复原出原始信号;理论上说, 通常人声的频率范畴上限可达 15kHz 或更高,但是即使当带宽限制到低于 3kHz 邻近的频率时语音仍是较简洁听懂的;对于数字通信系统,标准采样率为8000Hz;量化是将时间上离散而幅度依旧连续的波形幅
5、度值离散化,其打算了声音的动态范畴;假设采纳8位,就可将声波分为 256 级;本系统采纳 Matlab 的 audiorecorder 对象进行声音信号采集;使用默认参数8kHz 采样率, 8 位量化精度,单声道;2 预加重处理将经采样后的数字语音信号 sn通过一个高通滤波器: Hz= 1 az -1 ,0.9a1.0本系统中取 0.97;经过预加重后的信号为: sn= sn asn-1;由于发声过程中声带和嘴唇的效应, 使得高频共振峰的振幅低于低频共振峰的振幅,进行预加重的目的就是为了对信号进行平滑,提上升频部分, 补偿声带和嘴唇的效应, 平整信号频谱, 保持整个频带中的信噪比, 以便于进行
6、频谱分析或声道参数分析;3 端点检测050010001500200025003000350040004500时域 波 形0.40.20-0.2-0.43020100051015202530短时 能 量图 2 端点检测结果欢迎下载精品学习资源端点检测即从一段信号中检测出语音信号的起始点和终止点,在孤立词识别中,可以削减非实时系统中的大量运算; 常见的端点检测方法有利用时域特点的音量、过零率,利用频域特点的频谱变异数、频谱的熵等;时域方法运算量小, 实现简洁,且足以满意一般应用;短时能量可以利用帧内数据的平方和进行运算;理论上有声语音的能量值较大,无声语音如摩擦音的过零率较高,可以通过运算短时能量
7、大致判定出语 音的端点, 然后使用过零率找到语音端点的相对精确位置;试验时发觉汉语语音通过能量特点已能较好地确定端点,此时通过过零率特点并不能进一步精化结果,因此系统只使用了能量参数;编程时当能量值大于开启阈值时确定为起始点,小于关闭阈值时确定为语音终止点;阈值大小依据试验情形确定;图2 为汉语 5 发音的端点检测情形;4 MFCC 特点提取数字语音信号经过以上的预加重处理和端点检测之后,将进行梅尔倒谱系数MFCC 的运算;运算方法如下:1) 分帧语音整体上是非平稳信号, 但其特性在 20ms的量级内基本保持不变; 取 10ms 为一帧, 为防止相邻帧间的过大变化, 帧之间应设置重叠, 选取帧
8、移为帧长的一半;另外为了便利后面的 FFT 运算,这里的帧长取为2 的整幂指数;2) 加窗由于进行离散傅里叶变换时将时域信号进行了周期延拓,在两端一般会有不连续的现象,为了削减吉布斯效应,通常要进行加窗处理,弱化边缘信号;在语 音信号处理中常用海明窗 hamming windows,在 Matlab 中有其实现函数;3) 傅里叶变换语音的时域信号变化快速,不易分析,而频域变化相对缓慢,因此对加窗后 的信号进行快速傅里叶变换 FFT,再折半舍弃对称部分后平方运算信号能量谱;4) 三角带通滤波器10.90.80.70.60.50.40.30.20.10020406080100120140图 3 梅
9、尔频率滤波器组将每帧能量谱中的线性频谱刻度转化成符合人耳听觉特性的梅尔刻度后,将其通过如图 3 的一组 N 个三角形带通滤波器 N 一般取 2030 个,本系统取为欢迎下载精品学习资源24,运算通过每个频带的能量并取对数; 其中梅尔刻度与线性频率的转换关系为:欢迎下载精品学习资源5) 离散余弦转换Melf 2595*log 10 1f700欢迎下载精品学习资源将上面得到的 N=24 个对数能量 Ek 带入离散余弦转换公式,求出L 阶的梅尔频率倒谱系数,这里L 通常取 12;离散余弦转换公式如下:欢迎下载精品学习资源NCmEk cosk 1mk1, m2N1,2. L欢迎下载精品学习资源通过离散
10、余弦转换,将能量集中在前面几项中,到达在削减判别参数提高运算速度的同时又不失其精确性的目的;6) 差量倒谱参数许多文献中提到利用差量倒谱参数来对语音的动态特性参数进行描述,可以提高系统的识别才能; 本系统试验发觉使用差量倒谱系数后,系统的识别性能并未有明显提高, 有些情形下甚至有所下降; 综合考虑, 本系统仅使用静态 MFCC 参数进行识别;5 训练与识别在特点匹配方面有动态时间规整DTW 技术,有效地解决了语音信号的特点提取和不等长语音匹配问题;此外仍有矢量量化VQ 和隐马尔科夫模型 HMM 理论,但这些基于统计的识别技术都需要大量的语音材料来提取统计特点,实现也比较麻烦;相对而言, DTW
11、 实现简洁,在特定人孤立词的识别方面也能够有 足够的精确度,为本试验所采纳的方法;动态时间规整是将时间规整和距离测度结合起来的一种非线性规整技术; 算法的思想就是把未知量匀称地伸长或缩短, 直到与参考模式的长度一样; 在这一过程中,未知语音的时间轴要不匀称地扭曲或弯折, 以使其特点与模型特点对正;图 4 DTW 算法搜寻路径示意图如图4,要找时间规整函数 M= wN ,使测试矢量的时间轴 N非线性地映射到模板的时间轴 M上,并满意:欢迎下载精品学习资源Dminw i Md Ti 1i , R w i 欢迎下载精品学习资源式中, d是第i帧测试矢量 Ti 和第wi 帧模板矢量 Rwi 之间的距离
12、一般采纳欧氏距离;一般DTW 采纳逆向思路,从最终点开头,逆推到起始点,查找其欢迎下载精品学习资源中的最优路径;在求解中除了要约束路径的起点和终点外, 仍可以约束斜率在 02之间,使路径不至于过度倾斜,这样每一个格点向前向后都只有三种可能落点, 以加快算法的运算速度;真正进行语音识别时, 第一需要采集 09 的汉语语音信号,运算各自的 MFCC 参数并储备起来作为参考模板; 进行识别时, 将待识别信号的参数特点依次与模板特点进行 DTW 匹配,并从中选取距离最小的作为识别结果;四、 Matlab的 GUI 实现最终采纳 Matlab 的 GUI 工具箱搭建一个简洁的用户界面,能够用前面介绍的原
13、理进行汉语数字语音的识别,而且便于操作,便利使用;用户界面如图 5 所示,开头时用户要依据界面提示依次读出09 的汉语读音,每次录音终止后, 界面上会用两条竖线显示出端点检测的结果, 由于有时候检测的端点是错误的,此时需要用户判定本次录音是否有效,挑选“是,重读数字” 或“否,往下进行”;10 个样本数据采集完毕后,就可以录入语音进行识别,并在界面上显示出识别的结果;图 5 系统界面参考文献1A.V .奥本海姆, R.W.谢弗, J.R.巴克离散时间信号处理 M 刘树堂,黄建国译西安:西安交通高校出版社, 20012 刘玄和,宋庭新 .语音识别与掌握应用技术 M. 北京:科学出版社, 20213 张培玲,成凌飞 .基于 MATLAB的汉语数字语音识别系统 J. 机械治理开发, 2021,1224:205207.4 王华朋,杨洪臣 .声纹识别特点 MFCC 的提取方法讨论 J. 中国人民公安高校学报自然科学版,2021,551:2830.5 林常志 .基于统计的语音识别方法分析报告 .2003欢迎下载