基于Kinect相机的抓取定位技术研究

来源 :长春理工大学 | 被引量 : 0次 | 上传用户:flyhiger
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,机器人抓取技术被广泛应用于社会生产生活的各行各业,随着机器人应用场景越来越广泛,要求机器人对场景信息的分析能力越来越强,所以在复杂的环境下对任意物体各姿态的准确抓取已经成为机器人抓取技术研究的热门方向。本文重点研究目标抓取定位算法,旨在确定更为精准的抓取位姿以便提高抓取成功率。本文将机械臂与视觉技术、深度学习相融合,利用Kinect相机增强机械臂对环境的感知能力,采用深度学习方法获得更具有鲁棒性的抓取位姿,并搭建物体感知、目标抓取定位以及抓取执行的实验平台。在物体感知环节,本文采用Kinect相机获得RGB-D图像,结合像素填充和改进的联合双边滤波算法对深度图空洞进行修复。在目标抓取定位环节,针对不同的目标场景,本文提出的两种基于深度学习的目标抓取定位算法如下:1)针对单目标场景,借鉴基于区域提取的抓取定位网络结构,研究密集模块与残差模块的优劣对原网络进行改进,设计了以DenseNet-121网络代替Res Net-50作为特征提取结构的抓取定位模型。鉴于原网络模型在小目标检测性能上的劣势,在特征提取过程中增加特征金字塔,并采用ROI Align代替ROI Pooling的网络结构,解决了抓取定位中的多尺度问题和抓取框定位不准的问题。最后提出采用网格划分的思想对抓取建议网络进行改进,减少了区域重复估计,平衡了检测速度与检测精度。2)针对多目标场景,将目标检测算法和抓取定位算法融合,为了满足高检测精度和高检测速度的要求,两种算法均采用YOLOv4的网络结构。在抓取定位算法中,首先增加SPP模块对其进行改进;其次采用适应机械臂抓取特性的多比例旋转锚框机制进行网格预测;最终实验表明YOLOv4与旋转锚框的结合对具有多种抓取方式的物体在定位方面鲁棒性更高。在抓取执行环节,使用“眼在手外”的标定方式获取目标物体可抓取位置的空间坐标,并采用笛卡尔空间下的直线插补算法进行机械臂轨迹规划。搭建实物平台用于完成对单目标和多目标的定位与抓取任务,其中,对单目标的抓取检测准确率为92.5%,抓取成功率为86.5%。针对多目标的定位抓取实验,先利用目标检测分割成单一物体,再采用抓取定位技术确定抓取位姿,抓取检测准确率为95.5%,抓取成功率为92.7%。验证了本文提出的目标抓取定位算法的可行性和鲁棒性。
其他文献
基坑工程是建筑工程的重要部分,随着高层建筑的发展,基坑工程也得到了迅速发展.文章以S11地块住宅项目为例,对其基坑施工关键技术进行研究,通过整理施工方案数据资料,分析施工阶段影响因素,总结施工的有效经验措施,为类似工程施工提供借鉴.
近年来视频监控已经成为维护国家和社会安全防控的重要方式,然而随着视频数据的急速增加,基于视频数据的危险行为识别已逐渐成为当今的研究热点,但是当前行为识别算法无法高效获取视频中的时空信息,且存在识别效率低,精确度差等弊端。本文主要研究内容是利用光流提取网络提取光流图作为输入数据,并采用注意力机制模型减少参与计算的网络参数,最终使用多流网络融合模型对视频中的危险行为进行分类识别。为了证明本文所提算法对
新材料基础研究作为我国经济社会发展的重要组成部分,研究领域的层次和领军人才的培养对新材料产业的发展有直接影响.文章对相关数据进行收集和整理,通过专业的分析软件和分析方法对相关数据进行量化分析,分析总结研究人员的职称、所在机构、发文数量和h指数等数据,探究新常态环境下我国新材料基础研究领域的高层次人才阶段性的研究成果,以促进新材料基础研究领域的进步和发展.
随着互联网的大量技术逐渐成熟,通信系统的技术革新也越发卓越,无论是在通信能力方面还是在通信质量方面都大有提升。D2D通信技术(Device-to-Device,终端直通)是近距离的移动用户之间可以直接建立通信的一种技术,使用该通信方式的用户可不通过基站转发信令就能完成数据的传输过程。将该技术应用到通信系统中不仅能够减少资源的空闲浪费,而且增加了频带的使用率,满足了用户对网上冲浪的速率需求。但是,这