【摘 要】
:
为实现大规模栅格数据的高性能分布式处理,在最新开源项目Hadoop基础上,设计与开发了一个基于MapReduce计算模型的栅格数据分布式计算系统,重点探讨该系统的栅格数据HDFS分布
【机 构】
:
长安大学地球科学资源学院,中国科学院地理科学与资源研究所,重庆师范大学地理科学学院,
论文部分内容阅读
为实现大规模栅格数据的高性能分布式处理,在最新开源项目Hadoop基础上,设计与开发了一个基于MapReduce计算模型的栅格数据分布式计算系统,重点探讨该系统的栅格数据HDFS分布式存储、高效Map并行处理及结果Reduce合并等关键技术;基于上述技术实现了对大规模栅格数据分布式计算原型系统,详细介绍系统组成,并进一步将其应用于处理全国范围90m地形数据.结果表明:分布式计算方法通过连接多计算节点,有效地提高了栅格数据计算效率,提高地学栅格数据的分析计算能力,从而解决地学相关模拟计算的性能瓶颈.
其他文献
综述了国内外聚α-烯烃合成油(PAO)生产工艺及生产状况。介绍了国外PAO主要生产商的工艺。对我国聚α-烯烃合成油的发展提出了建议。
“文化”是人们使用得最为频繁的一个词语,几乎和人们生活的各个方面都息息相关。文化的定义多种多样,但都承认人们是作为社会的一员而获得的。交流使人们沟通,而文化使他们
随着中国经济的持续快速增长,对能源的消耗需求日趋紧张。如何降低单位GDP的能耗水平,已经成为一个迫在眉睫的问题。而建筑空调系统节能,尤其是商业建筑,已经成为这一趋势下的必
针对k-means聚类算法特点,给出了MapReduce编程模型实现k-means聚类算法的方法,Map函数完成每个记录到聚类中心距离的计算并重新标记其属于的新聚类类别,Reduce函数根据M
社会保险是社会保障体系的核心内容。本文以社会保险理论基础为支撑,以美、德、日三国为对象,对三国的社会保险体系、管理体制、社会保险水平、社会保险基金运营情况进行综合
采用硼酸酯化法合成了聚乙二醇(6000)单硬脂酸酯,试验考察了反应时间、反应温度、催化剂用量、物料比等对产物中聚乙二醇(6000)单硬脂酸酯含量的影响,确定了最佳合成条件。在
近年来,保障本土文化安全,繁荣文化市场成为我国文化产业发展的重点,在西方文化强势入侵,我国文化产业保护机制不完善的大背景下,"文化例外"原则无疑为我国文化产业政策提供
离心式氧气压缩机正常工作状态时需承载高内压载荷,高强度承压机壳的设计是其结构设计问题中的难点。文中完成了三万等级离心氧压机在高内压条件下的仿真分析,考虑了上下机壳
近年来,我国财政改革的步伐和力度进一步加大,财政监督在保证财政改革的顺利推进、保障财政政策的有效落实、提高财政管理水平等方面发挥了重要作用。本文注重理论和实践相结
毒品问题已成为世界许多国家包括我国在内的一个日益突出的社会问题。它与爱滋病、恐怖活动一道被联合国列为地球上人为的三大公害。打击毒品犯罪一直是我国刑事司法工作的重