论文部分内容阅读
传统的聋儿言语康复治疗通过特殊言语教师的手势、口型等方式来训练,难度大、效率低而且教师资源缺乏,难以达到国家提出的“人人享有康复服务”的目标。特别是由于高成本的人力资源等经济原因,很多偏远地区的残疾人不能及时得到康复医疗,从而造成终身聋哑。因此我国迫切需要一种数字化教育和学习语言发音的方式,能够让学生观察准确的发音方式,并随时可以接受训练和反馈,提高语言学习和训练的质量。 本项目的研究将致力于利用计算机多媒体信息技术实现一个交互式、可视化、多媒体的语言教学平台,即聋儿言语康复系统与言语康复学习机,目标就是实现低成本、高效率的学习机,适应于聋儿课堂与家庭的学习,帮助聋儿快速学习、训练和应用语言,从而更好地为聋儿言语康复工作做贡献。 本文主要完成了面向聋儿言语康复的语音交互系统的设计与分析,并在此基础上完成了数据采集系统的软件设计。利用matlab编制的程序对聋儿与正常儿童音频数据的时长、响度、音调和清浊音进行测试对比与分析,发现聋儿具有拖音严重、响度较低、音调区分度低且浊音发音欠缺等特殊特征,并通过对这些特征进行可靠性和准确性的分析,设计出一套结合语音检测与语音识别的聋儿言语交互系统。 语音交互系统包含听觉、启音以及情景对话,并利用C#设计系统软件。在启音模块中,详细介绍了各个模块的算法、实现步骤及实现效果。经过测试,由于聋儿的发音水平参差不齐,得出聋儿四声调的整体识别率为67.71%,而清浊音的整体识别率普遍较高,为95.02%。在情景对话中,利用语音识别技术中的非特定人、连续语音识别,得出正常儿童总体识别率为95.95%,而聋儿由于发音状况不稳定,所以总体识别率较低,为77.11%,总体满足聋儿言语学习要求。最后简要介绍了言语康复学习机嵌入式手持设备与骨传导耳机成品图,同时参加了2010年在深圳举办的第十二届中国国际高新技术成果交易会,获得广泛关注。