数据网格环境下的副本管理技术研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:Fllyy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据网格为用户屏蔽了底层的物理资源,实现了异构、分布海量数据的一体化访问、存储、传输和管理。副本管理是数据网格中的一个关键技术,它能极大地提高数据的安全性、可靠性以及系统的容错性等。目前国外有关副本管理技术的研究大都是针对特定数据网格项目的,这些副本管理技术在适应性和可扩展性方面有一定的局限性,国内虽然也有一些副本管理技术的研究,但总体看来研究的规模不太大,应用也不太广泛。因此,本文对副本管理技术的通用性、性能和扩展性进行研究。 本文首先介绍了网格和数据网格基本原理、GIOBUS系统及GLOBUS系统中的副本定位服务和文件传输服务。接着介绍了副本管理的基本原理,指出整个副本管理系统由一系列副本管理组件组成,共同提供给用户对数据的高效透明访问。在副本管理系统的诸多关键组件之中,副本的创建、选择和一致性维护是当前研究的热点,因此本文对当前主流的副本创建、选择和一致性维护策略进行了深入研究。 在上面的研究基础上,本文提出了一种适用于数据网格环境的多区域混合式副本管理结构,并决定域内和域间采用不同的副本管理策略。在域内副本管理策略中,本文首先提出了一种结合文件访问次数和节点负载的动态副本创建策略,接着在此基础上提出了基于GridFTP并行传输和条状传输技术的副本选择方法,然后提出了一种结合副本创建时间、访问次数、副本文件大小三种因素的副本置换方法。在域间副本管理策略中,本文提出先根据一元线性回归方程来预测文件的访问趋势,再决定是否进行域间副本复制,在域间副本选择的处理上,本文提出了一种结合文件访问趋势、存储节点负载和GridFTP传输日志的域间副本选择策略,可以较准确的预测不同域内的端到端传输能力。另外,针对多区域混合式副本管理结构的特点,本文还对该结构下的副本一致性维护策略和元数据管理方法进行了研究。 本文还使用了标准的optorSim网格仿真器仿真了文中提出的域内副本管理策略。通过仿真实验,证明该动态副本管理策略与optorSim模拟器内置的5种副本管理策略相比,在用户对资源的访问具有时间相关性时体现了较好的性能。
其他文献
无线传感器网络集成了传感器技术、嵌入式技术和无线通信技术,具有自组织、构建灵活、覆盖广等优点,因此广泛应用于军事领域和民用领域。目标跟踪技术是目前无线传感器网络研
以网络技术和多媒体技术为代表的现代信息技术的发展,给教育领域带来了前所未有的生机与活力。但网络的蓬勃发展为网络教育仅仅是提供了一个物质的基础,要使网络真正的为教育服
序列比对是分子生物学的一个基本而重要的方法,被广泛的运用于同源基因搜索、结构和功能预测以及系统发生分析等方面。它通过比较两条(称为双序列比对)或者多条(称为多序列比
学位
RNA作为一种重要的生物大分子,在生命活动中具有关键性的作用。自2000年以来有关RNA的研究已经有6年被Science杂志列入世界十大科技进展,这充分说明了RNA的研究在当前生物学领
微数据是指与个人、公司、社团等个体相关的数据,这些数据对趋势分析、疾病研究、市场分析等都具有重要的意义。因此,很多组织都在收集或发布大量的微数据。但是,微数据的发布会
近年来,越来越多的基于中间件的构件化系统被用于实现跨网络的业务协同。这些系统必须保证只有合法的用户才能访问系统中的敏感资源,即正确地实施访问控制,否则可能导致企业资产
学位
随着科学技术的飞速发展和互联网的广泛普及与应用,即时通信已经成为人们交流的重要手段。在园区网络中,除了传统邮件等信息交流手段外,即时通信作为一种方便有效的交流方式,
航线问题关系我国重要的海运和海上贸易等领域,是一个重要的决策问题。随着国内国际贸易形势的良性发展、市场经济体制的日臻完善,国内各航运公司在同类市场的竞争日趋激烈。在
学位
文件系统或裸设备被广泛使用在各种关键的集群系统中。随着应用对可用性要求越来越高,这两种技术都暴露出一些缺点。文件系统有两个主要问题。第一,冗余问题,既任一时刻它只
经过二十多年的发展,时态数据库理论研究取得了丰富的成果,而时态数据库实现技术尚处于起步阶段,目前国内外还没有一个真正意义上的时态数据库管理系统,因此开发一个时态数据库中