【摘 要】
:
Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)是一种适合在通用硬件上运行的低成本、高度容错性的分布式文件系统,能提供高吞吐量的数据访问,适合针对大规模
【机 构】
:
南京邮电大学计算机学院,江苏省大数据安全与智能处理重点实验室
【基金项目】
:
国家自然科学基金(No.61572263,No.61502251,No.61502243);江苏省高校自然科学研究项目(No.14KJB520031);中国博士后科学基金项目(No.2016M601859);江苏省自然科学基金面上项目(No.BK20161516)
论文部分内容阅读
Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)是一种适合在通用硬件上运行的低成本、高度容错性的分布式文件系统,能提供高吞吐量的数据访问,适合针对大规模数据集上的应用。然而,HDFS中还面临一些性能优化问题,如负载均衡不足。虽然Hadoop系统自带的负载均衡器可以实现均衡调整,但需要用户预先给出静态的阈值。为了解决阈值的固定性和主观性,通过对磁盘空间使用率、CPU利用率、内存利用率、磁盘I/O占用率、网络带宽占用率等参数的分析评估优化,形成对阈值的计算表
其他文献
随着互联网技术的发展和普及,依托互联网平台的共享经济得到长足发展。共享经济作为一种新的经济形态,既为消费者提供了便利,也为社会闲置资源提供了有效的利用途径。民宿在
2010年,山东省邮政速递物流公司(以下简称山东速递物流)全年业务收入首次突破10亿元,一举成为全国收入规模超10亿元并“双超”完成收入与利润指标的邮政速递物流公司之一。今年1
自媒体视角下的意识形态话语权构建应当反映其话语表达的内在规律,着眼于构建主体、构建对象以及构建方式这一研究主线,以人的主体性、发展性为根本,探寻意识形态话语权的规