基于Kinect的空中手写系统

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:dmf625
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
字符输入是人机交互(HCI)领域的一个相当重要的方面。总的来说,目前主流的输入系统都有着各自的局限性。它们基本都依赖于一定的硬件设备,比如:触摸屏、键盘等。这些接触式的设备在一定程度上制约着用户的自由、远程操控。人机交互的一个重要目标是使得计算机更加智能,并且缩减用户与计算机之间的鸿沟。为了能够提升手写输入系统的体验和令其更加地自然和用户友好,本文提出了一种新颖的,基于Kinect设备的空中虚拟手写系统。使用这个系统的时候,用户可以将自己的指尖视为一个虚拟的笔锋,通过在空中的虚拟自由划写来完成字符的输入任务。它将Kinect作为成像的采集传感器,来追踪和分析用户的手写行为,除此之外无需借助其他的设备。它强调的是一种裸手的、非接触式的手写输入系统。本文的主要工作和贡献如下所示:1.我们首创性地提出和实现了一种空中虚拟手写系统。它是一种裸手非接触式的应用,能够给予人更简易和自然的手写输入体验。2.我们提出了一种混合模型用于视频人手分割,它借助神经网络技术将三个子模型智能地融合起来。算法可以处理传统基于视觉的模型所面临的技术难题,如脸手交叠、光线变化等。同时也解决了Kinect自身伴随着的,彩图-深度图信息两者不同步问题。3.我们提出了一种双模式切换算法用于系统当中的指尖定位。这种方法对前一步人手误分割有着很好的鲁棒性。同时可以应对在手写过程中高自由度的手部姿态。4.然后,将连续视频帧里使用指尖定位算法得到的指尖位置串接在一起,重构为手写的字符笔画。字符被输入到一个目前业界领先水平的识别引擎得到识别结果的输出。5.与此同时,本文设计了一套专用的手势,用于用户与这个虚拟手写系统的交互。手势被设计为类似于身体语言从而能够易于被用户掌握上手。最后的实验表明,对于本文的虚拟手写系统,在前5个候选字范围内,输入的汉字、大小写英文字母、数字都能达到90%以上的识别精度。系统的处理速度可达20帧每秒。大体来说,系统能够满足日常的使用需求。
其他文献
《教育信息化十年发展规划(2010-2020年)》明确指出教育信息化发展要以教育理念创新为先导,以优质教育资源和信息化学习环境建设为基础,以学习方式和教育模式创新为核心。文
介绍市罗门西村绿化是绍兴较早建设的小区绿化之一。它将观赏性与功能性有机地结合在一起,使小区绿化超脱了为绿化而绿化的俗套,小区通过集中绿地、道路绿地、宅旁绿地及周边绿
高职贫困生作为大学生就业中一个需要重点关注的群体,在就业的过程中面临更多的困难和压力。从"身体综合素质、思想道德素质、语言表达能力、人际沟通能力、自我学习能力、解
在社会主义市场经济深入发展的背景下,我国各行业领域普遍加大了改革力度,这一变化在近些年的金融行业中得以反映,社会对金融行业人才的需求也从知识型人才需求向应用型转变,
小学英语单元学习应为学生提供一个集中学习与深度理解的平台,然而当前小学英语单元学习中出现了一些亟待解决的瓶颈问题。教师可通过评价工具,运用逆向设计来解决单元学习目
高校提高思想政治理论的课程教学与"学习共同体教学模式",两者在根本上具有同样性与一致性。可是现在的关键问题在于人们对于"学习共同体教学模式"的深层内涵认知还不够,以至
目的:探讨肌肉注射A型肉毒毒素(BTX-A)对SD孕鼠血清雌激素、孕激素及其受体在生殖器官中表达的影响,了解BTX-A对胚胎的发育毒性,为BTX-A在临床用药的安全性提供理论依据和实验参考
本文将重点研究高职院校质量监控体系来展开研究。首先,将分析我国高职院校的质量监控体系基本构建概念和原则。然后,就目前我国高职院校的监控体系的现状进行研究,发现主要
网络教学视频是在线教学手段和载体,是当前课堂教学必要的、有益的补充。本文以网络教学视频发展现状为基础,分析网络教学视频存在的学科体系分布不均匀、教学者教学方式受限