【摘 要】
:
全球聋哑人超过7000万,手语是他们沟通的首选方式。普通人未系统学习过手语,与聋哑人的交流存在障碍。手语识别技术利用传感器和计算机将手语翻译成语音或文字,能帮助正常人理解
论文部分内容阅读
全球聋哑人超过7000万,手语是他们沟通的首选方式。普通人未系统学习过手语,与聋哑人的交流存在障碍。手语识别技术利用传感器和计算机将手语翻译成语音或文字,能帮助正常人理解手语动作,且作为一种便捷、智能的交互手段,已广泛应用到机器人控制、运动医疗和VR/AR等领域。 论文对中国手语中单手词汇的识别展开研究,设计并实现了可穿戴手语数据手套的硬件系统,包括五个微型MEMS节点,一个低功耗蓝牙主控节点和一个蓝牙适配器。通过建立手部模型,分析运动时的约束条件和数学关系,并结合手语特点选择手的加速度、角速度和姿态角作为手语动作的特征。为了提取手语特征,论文对MEMS传感器进行了误差分析和校正,提出了基于四元数的扩展卡尔曼滤波算法以解算得到手部姿态,并提出融合样本熵和MEMS数据差分的方法进行手语分割。论文设计了手语词汇识别神经网络,采用卷积神经网络进行手语上下文信息提取,采用门控循环单元进行手语特征序列建模。论文通过15名志愿者采集了包含40个单手词汇的手语数据集并进行了扩充,基于数据集完成了网络的训练,并通过Adam算法、网络正则化、梯度剪切对训练进行优化。开发了基于Android的手套DFU升级系统,基于Unity3D的手部动作可视化系统和基于C++的实时手语词汇识别系统。 实验表明,手语数据手套的重量为17.8克,可连续使用6小时,姿态解算的精度为0.94°,蓝牙的发送频率为50Hz,5米内的丢包率低于10%。在本文的数据集上,手语词汇识别系统的用户相关和用户无关识别率分别达到96.7%和91.3%,平均识别时间为844ms,达到预期目标。
其他文献
微小型无人直升机具备体积轻小、成本低廉、飞行方式灵活等优点,在军事和民用领域中应用广泛。执行各类应用任务时,视觉导航系统都是微小型无人直升机系统的重要组成部分。阴影
如今,惯性平台系统的地面测试环境对监控系统的数据采集、处理、存储的实时性和可靠性提出了越来越高的要求。本文以“惯性平台实时监控系统”为研究背景,研究和设计了基于Vx
近地告警系统是当飞机与地面危险接近时,为避免飞机与地面相撞而给机组人员提供报警、从而增加飞机安全性的一种告警系统。近地告警曲线是是否需要报警的唯一依据,因此近地告
传感器无人机将以传感器/机体共形的方式搭载跟踪雷达和对地监视雷达,并以亚声速近空间飞行器为载体,完成战场监视、目标探测与跟踪、情报收集等任务。
首先,基于信号36
对高压电的监测和测量是继电保护的重要前提,也是电力维护的重要组成部分。设计安全、可靠和实时性好的高压电缆信号监测仪具有重要实际意义。非接触式测量具有安全、方便等诸多优点,已成为高压电缆测量的发展趋势。本文针对非接触式高压传感器采集得到的三相高压电缆电压信号特点,进行了后续信号处理的软件算法设计和硬件系统设计。非接触式测量的主要问题是高压电缆周围电磁感应带来的各种高频和随机噪声干扰以及比较严重的同频
混沌理论是随着现代科学技术的迅猛发展,尤其是在计算机技术的出现和普遍应用的基础上发展起来的新型交叉学科。它已成为最新型智能计算机的三大支柱之一,引起了各国学术界和工
激光多普勒测速仪是一种可以精确测量物体运动速度的速度测量仪器。它具有动态响应、空问分辨率高、测量范围大、非接触测量等优点,不但能提高带钢速度测量的精度,还能避免传
一直以来,我国煤矿事故不断,给人民生命财产造成了重大损失,与当前正提倡的和谐社会建设严重不符。因此急需建立一个全面、准确的模型来对矿井瓦斯系统进行描述。模型建好之
短期电力负荷是电力系统调度、用电、计划、规划等管理部门的重要工作之一。提高负荷预测技术水平,有利于节能,提高电力系统的经济效益和社会效益。因此负荷预测已经成为实现电力系统管理现代化的重要内容之一。本文首先论述了短期电力负荷系统的研究背景、研究现状及研究意义。结合GPRS无线数据传输和嵌入式系统的特点,采用ARM9为核心,设计了电力负荷系统的嵌入式数据采集终端,能够实时、准确的采集负荷预测所需数据,
神经网络作为一种典型的非线性动力系统,具有极其复杂的动力学特性,现已成功应用于模式识别、联想记忆、信号处理、定点计算等科学领域。然而,神经网络在电路实现的过程中,由