存储系统低能耗数据布局技术研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:xhb876
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数字信息的爆炸性增长促使大规模存储系统的出现,磁盘以其大容量和低价格的优势成为数据存储的主要媒介。大量磁盘被组织起来以构建高性能、高可靠的海量存储系统。磁盘的机械特性使得磁盘存储系统成为数据中心能耗最主要的来源之一,能耗成本在数据中心总拥有成本中占据越来越高的比例,因此降低磁盘存储系统的能耗是降低数据中心总能耗进而降低其总拥有成本的关键。磁盘的工作状态被分为活动、空闲和待机三种,磁盘响应I/O请求时必须处于活动状态。磁盘阵列的数据布局方式决定了到达每个磁盘的I/O请求的空间分布,进而决定了每个磁盘的工作状态和能耗。已有磁盘阵列数据布局方式要么未考虑存储系统的能耗,要么在降低存储系统能耗的同时在性能、可靠性等方面存在诸多不足。将固态盘引入存储系统虽然在随机读性能、能耗等方面能有明显的改善,但其物理特性又决定了其在小写性能和可擦写次数等方面存在天生的不足。因此,对磁盘阵列上的数据布局方式进行优化以构建高性能、高可靠、低能耗的海量存储系统是一项重要而紧迫的任务。传统的日志数据分布方法将日志数据集中于专用日志盘上,使镜像盘周期性地切换到待机状态以节能,然而专用的日志盘使得存储系统存在单点失效、性能瓶颈和高能耗的问题。为此,提出了一种日志数据旋转分布方法RoLo和相应的分散式同步方法。RoLo将RAID10系统中镜像盘上的空闲空间组织成一个逻辑的日志空间池,通过将所有镜像盘的空闲空间轮流做为值日日志空间,并利用分散式同步将已使用的日志空间回收并重复利用,在有限的镜像盘空闲空间上构建一个逻辑上无限容量的日志空间。日志数据旋转分布方法未引入额外的日志磁盘,消除了传统日志数据分布方法下的性能瓶颈和单点失效瓶颈;相对较大的日志空间降低了磁盘启停的频率,不但延长了磁盘的寿命,也降低了存储系统的能耗。性能评估结果表明,日志数据旋转分布方法较RAID10节省高达47.2%的能量,较采用了传统日志数据分布方法的GRAID节省高达11.8%的能量。传统的文件分布方式大多仅利用文件访问的时间局部性或空间局部性将文件集中于少量的磁盘上,而未充分挖掘和利用文件访问的双峰分布特点以及固态盘和磁盘之间在性能、可靠性和能耗方面的互补性来优化文件的布局。为此,提出了一个动态数据重分布方法LoRo来进一步降低由固态盘和磁盘构成的混合盘阵的能耗。LoRo利用存储系统I/O负载的局部性和双峰分布特点,将读请求定向到在随机读性能和能耗两方面均具有优势的固态盘上,而将写请求定向到在顺序写性能方面具有优势的磁盘上。动态数据重分布方法LoRo能够在降低混合存储系统能耗的同时提高性能。性能评估结果表明,动态数据重分布方法LoRo相较热点数据集中方法PDC可节省高达68.2%的能量。通过将部分磁盘上的数据全部复制到其他磁盘上,使得部分磁盘切换到低能耗状态可以节能。但单存储卷基于数据复制的数据分布方法的节能效果不但受制于空闲存储空间容量,而且受制于存储负载强度,二者相互制约,限制了存储系统的节能。为此,提出了低能耗多卷文件分布优化方法AdapMig。其周期性地对多个存储卷上的文件进行重分布,最小化多个存储卷的总能耗,同时保持多存储卷的响应时间在预定的阈值之内。低能耗多卷文件分布优化方法首先对多卷文件分布进行建模,对文件的访问负载进行统计和预测,利用遗传算法对所设定的最优化目标进行求解,从而确定新的文件分布方式。低能耗多卷文件分布优化方法能够有效利用多存储卷上的空闲存储空间,在多存储卷内优化数据分布。实验结果表明,AdapMig较未采用多卷之间文件分布优化的PARAID可节省高达26.3%的能量。
其他文献
结合联合国2030年可持续发展目标(SDGs)构建城镇化可持续发展评价指标体系,从省内、外两个角度研究吉林省城镇化可持续发展状况。结果表明:吉林省城镇化可持续发展水平波动上
在认知图式理论的基础上,针对微生物课程的特点,构建了“导入段-熟悉段-掌握段”的三段式教学模式,并提出了六项立体化辅助策略,为提升学生专业英语能力奠定基础.
《2017年度中国出口跨境电商发展报告》显示,2017年中国出口跨境电商网络零售市场交易规模为1.2万亿元,同比增长21.2%。出口跨境网络零售市场的持续快速发展,对于产品供应链和物
报纸
如何运用最新的IT技术将客户关系管理(CRM)融入企业电子商务是当前的讨论热点。本文介绍了客户关系管理与电子商务的概念与关系,讨论了现行CRM的内在缺陷,探讨了Web2.0环境下客户
分布式实时软件强调信息流的实时交互和并行处理,支持实时并行的质量过程,适用于钢铁行业的生产过程质量控制。软件主要特征是完成不同功能的软件构件分布在网络的不同节点上
随着我国工业经济的迅速发展,国内对工程车辆需求也不断增加,但国内工程车辆的造型设计相似度较高,产品特征差异化不明显。工程车辆方面的产品设计一般遵循设计追随于功能的原则,除雪车设计也不例外,在除雪车设计中,存在者重视技术发展而忽视设计的问题,在小型除雪车形态设计方法方面,国内仍存在一定的空白。本课题旨在通过形状文法与泛族群方法相结合,设计出符合校园环境的小型除雪车的造型。该方法运用形状文法的规则对小
节能环保是当今世界各国政府共同面临的重大问题,我国政府已将节能工作放在了国民经济工作的重要位置。近年来,随着全球数字信息总量的快速增长,存储系统的能耗问题日趋严重,如何
1978年11月,中国经济开始改革开放,之后中国经济持续高速发展达30年之久,让全世界瞩目。目前经济总量已经跃居全球第二位。但是收入差距,尤其是城乡收入差距,自20世纪80年代
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
产妇分娩方式的选择受多种因素影响,现今全国剖宫产率急剧上升。世界卫生组织(WHO)调查显示中国剖宫产率达46.2%,已经严重超过WHO提出剖宫产率控制在15%以内的要求。据重庆妇幼卫生