海量存储系统扩展中数据组织调整的研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:wenyuanyuan0929
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着用户数量的增加以及用户数据的累积,存储系统中需要存储和管理的数据也将不断增长,系统中数据的组织和管理显得尤为重要。合理的数据组织可提高存储系统的性能,使存储系统具有高可靠性、可用性和可扩展性。通过对系统扩展过程中数据组织的调整进行研究,分析了几种常见存储系统的数据分布,结合集群系统存储空间数据组织的特点,加深了对现有对象存储系统扩展中弊端的理解,并为解决这些弊端提出了相应的重构机制。存储系统的扩展是导致存储管理成本提升的一个主要原因,存储系统的扩展导致数据的重新组织。通过对已有存储系统中数据分配算法进行分析,结合数据映射表和影射函数两者的优点,从数据分配和元数据一致性两个方面提出了数据重构机制。数据重构机制考虑了两个方面的因素,首先是数据分布的特点,其次是扩展中元数据的一致性问题。在遵从集群系统数据分布特点的基础上,扩展机制将指定设备上的数据按一定规律迁移到其他设备上,并在文件属性中加入新的标识变量来标识文件经历的扩展次数,通过一个索引表项来记录标识变量对应的(即发生扩展前后)环境特征。该机制能有效消除扩展后对文件访问时可能产生的混乱,使元数据信息在扩展前后逻辑上保持了一致。分析表明数据重构机制对系统性能的影响可控制在最小范围内,并在此基础上提出了新的设想和进一步要研究的工作。
其他文献
随着Internet的飞速发展,网络上的信息呈指数增长,其内容之丰富,种类之繁多,堪称世界上最大的信息资源,如何能够更有效、更准确地找到用户感兴趣的内容,滤除与用户的需求无关
随着市场竞争的日益激烈,企业需要不断改变自身的业务运营模式以求发展。为了适应企业发展的趋势,在软件开发过程中,使用工作流管理系统来管理企业的流程是一种很好的解决方案。
随着社会信息化程度的迅速发展,手机已经成为人们生活中不可缺少的一部分。由于无线通讯技术的不断发展,尤其进年来的2.5G和3G技术使得手机的功能日益强大,不再局限于传统的
随着软件系统规模的不断增大,系统架构日益成为影响软件系统的重要因素。对于规模较大的企业级应用而言,系统架构不仅会影响到系统设计和开发的进度,也会直接影响到系统的后
磁盘阵列在海量存储系统中有着广泛的应用,然而其系统总线带宽限制了底层通道的并行性,存储系统内部接口性能的差异制约着存储系统性能的提升。因此,消除系统总线带宽瓶颈和
DDoS攻击是互联网安全的重大威胁之一。随着网络破坏者的不断增多和攻击工具的不断改进,攻击防范的需求变得越来越紧迫。问题的严重性引起学术界的研究焦点从静态的防御单体转
在机械产品的设计和制造过程中,零部件的装配是极为重要的一步。传统的机械设计是在制造出物理样机之后再进行反复的试装配,这使得装配成了限制新产品研发速度的瓶径。本文基
在经历了多年大规模的网络建设之后,电信运营商眼下都将精力集中于对现有网络资源的整合、业务模式的创新、服务质量的提高和业务流程的优化等关键环节以期实现快速的投资回
随着Internet规模的日益扩大,各种应用以及网络流量迅猛增长,需要网络设备提供更高的带宽和数据分类处理能力。数据包分类技术对于防火墙、入侵检测、Qos、虚拟专用网、流量
颜色是物体最基础、最直接的特征之一,为人们提供了许多有用的信息。然而颜色信息并不鲁棒,图像颜色受到光照、物体、观察者三者共同作用,同一场景在不同光照下往往呈现出不同的