移动光谱视频采集系统与压缩算法研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:alwbgs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
光谱可以反映物质的本质属性,相对于普通图像在目标检测和识别中都有着很高的研究价值,近些年来一直是研究的重点,传统的光谱成像设备体积庞大只能通过扫描等方法成像,速度慢,只能获取静态的信息。光谱视频的实时获取,如何制作小型化,可移动的光谱设备已经成了制约光谱广泛应用的瓶颈,同时由于每张光谱图像包含多达几十甚至上百个通道,相对于普通的彩色视频数据量是其几十倍,给存储、传输和处理带来了很多的问题。如果要求光谱相机具有移动采集功能,需要对光谱数据进行无线传输,目前的无线传输的带宽无法满足实时传输的要求,必须要对光谱数据进行压缩,但是目前为止实时的视频压缩方法还是针对于三通道的彩色视频,而对于光谱图像,不仅没有针对性的压缩方法,也没有一个完整的压缩标准。本文主要贡献是研制出了移动化的光谱视频采集系统,探讨了普通视频压缩方法在光谱压缩上的应用,根据光谱图像通道间相关性和空间相关性和普通视频区别较大的特点,提出了一种基于深度学习的光谱压缩方案,并和普通视频压缩方法进行了对比,由于光谱应用和普通视频应用差距较大,普通视频压缩评判标准并不能全面代表光谱的压缩效果,因此针对光谱数据提出了自己的一套评判压缩质量的标准,并利用压缩后的光谱数据开展应用。论文组织结构如下:首先,介绍了问题的由来,光谱图像的特点,目前光谱成像方法和设备以及目前国内外针对光谱数据压缩的方法。针对目前光谱设备普遍体积大,无法移动拍摄的问题,研制了一款小型化的可移动无线传输的光谱视频采集系统,之后根据光谱视频传输存储的困难,研究了光谱压缩的方法,先是将传统视频的压缩方法应用到光谱视频上,讨论了传统视频压缩算法在光谱压缩上的表现,指出了传统压缩算法的不足,之后利用深度学习的方法利用Keras设计了一个多层对称神经网络,首先利用深度学习进行无损压缩,输入为多通道的光谱图像,中间经过下采样,3D卷积提取光谱图像的特征并降维,之后将降维后的数据进行熵编码输出为二进制码流完成光谱压缩的编码过程,之后的解码过程为编码的逆过程,通过上面的网络进行训练,得到一个完整的深度学习编解码器并和传统光谱视频的压缩算法进行对比。最后,我们首先探讨了目前光谱主要的一些应用,并根据光谱图像的特点以及传统的PSNR和SSIM并不能全面的反映出光谱图像的压缩效果的问题,本文提出了“特征峰平均错误(MECP)”这一评判标准作为评判光谱质量附加参数,之后利用压缩后的光谱数据完成了真假脸跟踪识别的应用并和传统的普通视频跟踪算法进行对比。
其他文献
由不同刚体通过运动副(铰)连接而成的系统称为多刚体连接系统。多刚体连接系统能完成特殊复杂任务,广泛应用于航空航天、车辆工程、仿生机器人、多关节机械臂等工业场景,同样
癌症,即恶性肿瘤,因传统治疗手段的局限性治愈率一直难以提升,由纳米材料辅助的光热治疗等新型肿瘤治疗技术成为人们新的希望。依托金等纳米材料的光热治疗能精准定位、创面
近年来,随着多智能体技术的迅速发展,多智能体系统协调控制在生活、工业、航天等领域有着越来越广泛的应用,比如无人飞机编队、地面机器人集群、地理勘测、联合救援、联合打
纳米材料所特有的表面效应、界面效应、小尺寸效应以及量子效应等特性,使得纳米材料在电学、力学、磁学、光学等物理和化学领域有着巨大的潜力。特别是在光电探测器领域,一维
作为能源互联网的物理载体,综合能源系统包含电能、天然气、热能等多种类型的能源,可通过多能互补的方式提高能源利用率和可再生能源的消纳能力,是解决日趋严峻的能源和环境问题的关键。“电—气耦合”是综合能源系统的重要形式,一方面,以电力、天然气为主要能源的区域级综合能源系统可采用冷热电联产的方式(Combined Cooling Heating and Power,CCHP),同时完成发电、制冷和供热,满
本文建立了带有内生或外生生育率的生命周期模型,从个人水平上看,它具有依赖于年龄的死亡率,从而个人是异质性的。理性的代表性个人在满足预算约束的条件下最大化他一生的效
天线辐射模型是天线性能测试、故障诊断的必要条件和基础,对于天线的设计、维护以及性能保障,具有十分重要的意义。然而,在外场复杂环境下,神经网络等传统建模方法极易受噪声
这些年,由于互联网技术的不断发展普及,我国的通信领域得到飞速发展,但是通信公司内部人员侵占公司公共财物这一问题也越来越突显。尤其是在经济体制转型升级的过程中,市场主
近十年来,声学超常材料的研制及其对声波调控的研究成为备受关注的研究热点。基于声波方程与麦克斯韦方程组的可类比性,光学中类似负折射、单向传输、隐身衣等,在声学领域都
定量数据的积累是科学发轫的原始途径,从海量数据中归纳出数学表示则是科学形成的必由之路。诞生于图书情报学领域的文献计量学、科学计量学和信息计量学,正逐步引领本学科由