基于可解释模型的微表情识别方法研究

来源 :辽宁大学 | 被引量 : 0次 | 上传用户:crazymouse
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着计算机硬件性能的提高,深度学习技术得以发展,逐渐被应用于各行各业,基于深度学习的面部识别研究已成为研究的热点。目前,面部宏观表情的研究已经取得了优异的成绩,但是微表情识别的研究还处于初级阶段。面部微表情具有持续时间短、强度低等特点,相比于面部宏观表情识别,微表情识别的难度有明显提升,若使用人工对微表情识别,需要对人员进行专业的训练,不仅耗时耗力,而且准确率也难以保证。因此,如何让计算机自动识别微表情是一个值得研究的问题。首先,本文对基于三维人体动作识别的时间卷积网络进行研究,由于在该时间卷积网络中输入的是一维骨架特征序列,而本文在进行微表情识别任务时,需要输入微表情视频帧序列,网络不仅仅需要具有处理时间信息的能力,还需要能够学习空间信息。因此,本文提出具有可解释性的时空卷积网络模型用于微表情识别,其在时间卷积网络的基础上,在其中添加空间信息,并对模型结构进行调整,使改进后的模型更好地应用于微表情识别任务中。除此之外,使用激活最大化方法了解模型隐藏层神经元捕获到的特征,使模型具有可解释性。其次,本文对面部动作编码系统进行研究与分析,发现微表情发生时,面部往往只有部分区域发生变化,且变化幅度明显。在此基础上,本文对Attention机制在计算机视觉中的应用进行了研究,发现Attention机制可以从大量的输入信息中选择部分有用的信息重点处理。因此,本文将Attention机制与原有的Res-STCN模型相结合,提出一种可解释Attention模型的微表情识别方法。该方法通过在Res-STCN模型的残差单元卷积层后添加像素注意力模块,使模型更加关注部分重点区域,提升了模型在微表情识别任务上的性能,并通过对像素注意力模块权重可视化来对其进行解释,保证模型的可解释性。最后,本文将所提出的方法在CASME2、SMIC和SAMM数据集上进行实验,并与已有的研究成果进行比较。实验结果表明,本文方法优于目前大部分的微表情识别方法。
其他文献
国企医院伴随着国家与社会需要孕育而生,伴随着经济社会发展不断壮大,也伴随着社会和行业发展而改革改制,从而焕发出新的生机和活力。近年来,党中央、国务院先后出台《中共中
根据新疆和什托洛盖盆地地质勘查和煤层气勘查成果资料,对盆地西山窑组煤层气赋存地质条件和储层物性进行分析研究,认为储层特征、煤层埋深是影响煤层气含气性和赋存最重要的
本文主要针对樊庄区块中部煤层气井生产特点,选取有高产井史、远离断层、煤矿、井网相对完善的煤层气井区开展注氮增产试验,探索出一套煤层气井注氮增产改造技术,通过向煤层
区域防突措施是指在突出煤层进行采掘前,对突出煤层较大范围采取的防突措施,井下预抽煤层瓦斯是一种非常重要的区域防突措施。本文根据A煤矿15号煤煤层赋存、瓦斯地质、采掘
针对乌鲁木齐矿区、阜康矿区大倾角中低煤阶煤层气井套管固井射孔完井、筛管完井与洞穴完井增产效果进行现场试验。收集同种井型不同完井方式产气效果,通过同样储层物性条件
6月19日,蜀绣艺术节在“蜀绣之乡”郫县安靖镇举行,迎来蜀绣艺术的狂欢。$$   20天前,5月29日,首届世界蜀商恳亲会开幕,来自世界各地的蜀商代表云集郫县,寻求投资发展商机,交流合
报纸
随着各区域间经济往来越来越频繁,内河水运事业依靠其成本低、载货量大的优势发展迅速,船闸通航量大幅增加,船闸超负荷运转。随之带来的问题是船闸反弧门不断受到充、泄水时
高强轻骨料混凝土具有质量轻、强度高、保温隔热性能好等优点,是具有良好应用前景的绿色建筑材料。将轻骨料混凝土应用于深受弯构件可有效减小构件尺寸、增大使用面积、减轻
无线Mesh网络(Wireless Mesh Network,WMN)具有高传输速度和高带宽的优势,是近年来受到社会各界的普遍关注的一种新型的多跳无线网络。由于多跳网络的网络拓扑结构的特点以及
伟大的理想信念是精神之"钙"。理想信念之火一经点燃就会产生巨大的精神力量。红色家书是中华民族烽火岁月的悲壮记忆,一封封烈士书信,铭记着一段段充满激越温情的辉煌历史,