基于语义分割的多模态室内场景三维重建关键技术研究

来源 :海南大学 | 被引量 : 0次 | 上传用户:KurtJohns
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维重建(Three-Dimensional Reconstruction)近年来一直是计算机视觉领域中的热点问题。尽管众多该领域的专家学者致力于三维重建的研究,但在增强现实、智能交互的相关应用中,复杂的虚拟环境带来了数以亿计的点云(Point Cloud)数据,且复杂点云之间存在相互遮挡的问题,导致现有的三维重建方法在处理大量且复杂的点云数据时,会出现重建效率低、重建精确度低、重建效果不佳等情况。而在物件种类多、点云更为复杂的室内环境下,此类问题尤其突出。因此,本文结合室内环境下三维重建的相关特性,将传统的点云匹配方法与新型的语义分割网络相融合,提出了一种全新的针对室内环境的三维重建方法。具体工作如下:1.本文首先讨论了三维重建研究工作的发展现状与研究趋势,结合不同视觉传感器所收集的视觉信息,分类探讨了不同的三维重建类型。然后针对目前室内环境三维重建的特性,分析了利用深度传感器(Kinect)获取室内多视角三维场景的深度数据类型,总结了当前室内场景下三维重建的特性、缺陷及发展方向。2.针对Kinect在室内环境获取的三维数据在重建过程对计算性能要求较高、重建精确度低、场景限制程度高的特点。提出点云匹配与点云稀疏化融合的三维重建方法。基于稠密性点云匹配对多视角彩色深度(RGB-D)图像数据进行建模,并利用该模型产生室内环境的三维点云,计算重建偏差及重建效率,然后利用八叉树数据结构对点云空间进行划分与压缩,构建三维空间超点(Super Points)模型,最后通过超点模型构建场景影像标签进行三维重建。3.本文针对各类增强现实三维重建应用中,存在实时性较差、重建效果不佳的不足,提出一种基于语义分割与点云匹配融合模型的室内环境三维重建方法。利用多模态RGB-D影像与相对应的多视角影像标签作为训练数据,使用语义分割网络(SegNet)进行监督学习。该方法标记了各视角下物体的空间位置信息,最后通过该模型对室内环境进行三维重建。理论分析和实验结果表明,本文提出的语义分割与点云匹配融合模型能够对复杂室内环境进行三维重建,能在保证良好重建效果的基础上,具有较高的重建效率,与同类方法相比具有较高的实时性和较好的重建效果。
其他文献
<正>近些年来,我国钢铁工业迅速发展,已成为我国国民经济的支柱性产业,同时也给环境带来一定影响。我国于2018年4月1日正式开征环保税,针对污水、废气、噪音和废弃物等突出污
<正>人民日报近日发文中指出,人工智能是一个"真货",但在一些随意和缺乏严谨性的交流或展示中被强烈地夸大了。文章内称,人工智能未来的良性发展,还有待清醒客观的判断和扎扎
高校公共体育课教学评价工作是对高校体育教学过程、效果、质量和结果的科学测量。遵循专业的评价原则有利于科学的制定教学评价计划,有利于全面详细的制定评价内容,有利于顺
目的观察旋覆代赭汤化裁方联合铝碳酸镁治疗胆汁反流性胃炎的临床疗效。方法将胆汁反流性胃炎患者90例随机分为对照组(铝碳酸镁)、西药组(铝碳酸镁+奥美拉唑肠溶胶囊)和中药
现代科技与网络的快速发展,城市化的进程不断变快,导致人类的活动空间逐渐缩小,幼儿身体活动的机会也相对地减少许多,身体素质有逐年下滑的趋势。从已有研究来看,关于幼儿体能训练的研究甚少,然而幼儿体能训练不仅能促进身体素质的发展,还能培养和提高幼儿的智力、观察力、以及团队精神,因此对幼儿体能训练的方法等进行深入的探讨就显得尤为重要。本研究通过文献资料法、问卷调查法、实验法探讨幼儿体能训练是否会影响幼儿身
近代以来行为经济学兴起,各界专家、学者把行为经济学与教育学相融合。进入新的发展时期,要求教育与时代发展相呼应,培养方式要注重内涵发展,提高教育质量。师资队伍建设与教师培养是一所学校的办学水平的重要衡量标准,而教师工作投入又是教师教学能力的重要体现,教师工作投入的高低与教学任务完成的及时性具有举足轻重的作用。提高中小学教师的工作投入水平势在必行,这不仅是教育相关工作人员意志的集中体现,而且也决定着学