基于深度学习的微表情检测和种类判别

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:Free0412
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
因其在金融安全、临床诊断、公共安全和情感监测等各个领域的广泛应用,近年来自动微表情识别已经引起研究人员越来越多的关注。微表情具有短暂、微弱和不被主观意志控制的特性。自动微表情识别包含微表情检测和微表情种类判别两个步骤,本文分别提出微表情检测方法和微表情种类判别方法。(1)为了从视频中检测面部微表情,针对微表情数据库样本规模较小的特点,通过迁移学习方法将深度卷积神经网络应用于微表情检测问题。选取预训练过的深度卷积神经网络模型,保留卷积层及预训练参数,在其后添加全连接层和分类器,构造一个二分类的微表情检测深度网络MesNet。为了去除微表情数据库中影响网络训练的噪声标签,提出过渡帧的概念和自适应识别过渡帧算法。实验结果表明:MesNet在CASME II、SMIC-E-HS与CAS(ME)~2数据库上的AUC值分别达到了0.9556、0.9338与0.7853,其中在CASME II短视频数据库和CAS(ME)~2长视频数据库上均取得目前最优的结果,表明所提出的MesNet具有精度高和适用范围广的特点;过渡帧对比实验的结果表明构造训练集时从原始视频中去除过渡帧能够有效提高MesNet微表情检测性能。(2)为了判别微表情种类,提出基于深度卷积神经网络和迁移学习的微表情种类判别网络MecNet。为了提高MecNet在CASME II、SMIC和SAMM联合数据库上的微表情种类判别准确率,提出基于自编码器的微表情样本生成网络Meg Net用以扩充训练集。Meg Net使用CASME II亚洲人的微表情样本生成欧美人的微表情样本。Meg Net设计卷积模块实现图像编码,设计基于子像素卷积的特征图上采样模块实现图像解码,设计基于图像结构相似性的损失函数用于网络优化。将生成的欧美人的微表情样本加入MecNet训练集。实验结果表明:使用Meg Net扩充训练集能够有效提高MecNet微表情种类判别准确率。结合Meg Net,MecNet在CASME II、SMIC和SAMM组成的联合数据库上的表现优于大部分现有算法。
其他文献
老牛沟金矿地处华北地台北缘东段,天山-阴山东西构造带东端北缘与新华夏第二隆起带张广才领南端东缘交接地带,辉发河断裂构造南东侧,夹皮沟北西向主断裂构造带中部,成矿地质条件良好,找矿标志发育,具有较好找矿潜力。本论文以勘查区找矿预测理论和综合信息成矿预测为指导,以“吉林省桦甸市老牛沟金矿床详查”项目为依托,在成矿地质背景及已知矿床地质调查基础上,总结矿床地质特征,分析成矿地质条件,提取找矿的地质、地球
在现代工业中,随着对环境的关注,对于发动机的排放标准和燃油经济提出了更高的要求,因而对于发动机燃烧室内的火花塞也同样提出了更高的要求,但同时也造成了火花塞氧化、腐蚀从而影响使用寿命的问题。因此需要开发一种高性能的火花塞电极材料。本文根据火花塞的工作环境对材料的性能要求,利用真空冶金工艺制备NiAlSiY合金材料,通过电渣重熔工艺对合金材料进行精炼获得组织均匀致密、纯净度高的NiAlSiY合金,再通
刚进入大学校园的大一新生们,就会面对与中学阶段存在巨大差异的大学校园学习生活。面对气候及日常生活方式上的转变、与高中截然不同的学习管理模式、老师室友同学之间的人际交往关系处理上,都会产生不适应的问题。根据以往的研究,多数学者在对新生产生校园不适问题的研究都更侧重于学生本人,通过个案干预来就问题而解决问题。本文研究中,笔者从生态系统理论视角来进行分析解决问题,将学生个人放在一个整体的班级环境中去进行
决策作为人类生活中的一项基本活动,是人们行动的先导。当代社会经济的不断发展以及网络信息技术的不断进步,无论是政治、经济还是日常的生活,决策已经存在于我们生活的方方面面。随着现有决策问题的复杂性和不确定性不断加剧,模糊多属性决策应运而生,但决策过程中的属性评价信息也变得更加具体多样,传统的模糊语言集已经很难对现今复杂多变的评价信息进行全面的描述,因此对于模糊语言集的拓展研究十分必要。本文在直觉语言集
近年来随着社会的进步以及工业化进程的不断加快,人类向水体中排放了大量的重金属,其中镉污染尤为严重,在污染环境的同时也严重影响了水生动植物甚至人类自身健康。重金属能够在水环境中发生迁移转化,吸附就是其中一种重要的转化形式。生物膜作为自然水体中吸附重金属的重要组成部分,包括金属氧化物等无机组分和藻类等有机组分。近年来富营养化日趋严重,导致水体中有机组分占比升高,并且有机组分具有比表面积相对较大,表面官
目前针对海底远距离探测技术主要是利用声呐设备,侧扫声呐能测量细致的海底细节信息,多波束测深声呐能够测得海底的地形信息。当前多数研究只是单独对测深或者侧扫声呐数据做处理,但有些特殊目标或者地形必须将两种图像结合起来才能很好的识别出来。侧扫声呐图像由海底回波强度组成,但没有相应的高度信息,而测深数据能反映海底地形信息,但无法判断地貌信息。针对海底山包识别问题,单单依靠侧扫声呐图像有时候会与海底沉积物相
土地是不可再生和稀缺的自然资源,随着经济的快速发展,土地需求日益增加,一定程度上推动了土地市场的快速发展。乌鲁木齐市作为首府城市,人多地少,资源相对紧缺,如何处理国土
复二次空间Qn是n+1维复射影空间CPn+1的复超曲面,Qn上的黎曼度量是CPn+1的Fubini-Study度量的诱导度量.本文研究Qn上的测地线,对Qn上任意一条测地线γ(t)(t为弧长参数),存在
当今,生活日益富足的人们开始越来越追求精神生活的满足,这为旅游产业的发展提供了有益的外部环境。乡村旅游作为一种新的旅游方式以其独特性吸引了越来越多人的关注和追捧,一方面有利于助推农村地区的经济发展,另一方面还能够促进对农村自然生态环境和人文资源的保护,推动农村绿色持续发展。目前,我国政府仍然掌控着旅游产业的发展,指引着旅游业发展的方向。政府行为的发挥成效对乡村旅游的发展起着重大的影响。因此为了确保
煤的生物产气可实现煤碳资源的高效清洁化利用,近年来受到越来越多研究者们的关注。煤层生物成因气是由多种微生物协同作用的结果,其中硫酸盐还原菌(SRB)在煤的厌氧降解产气中发挥重要作用,但是有关其对褐煤的作用研究报道较少。本文以实验室保存的产甲烷混合菌群作为出发菌源,以云南昭通褐煤作为研究对象,首先对混合菌群中的SRB进行定向分离纯化,然后研究其在褐煤表面的吸附作用,最后比较分析了SRB作用前后褐煤物