【摘 要】
：
在大数据时代,数据规模的不断扩大,数据的多样性愈发突出,提高分布式聚类算法的结果质量逐渐成为关注的焦点.针对多数分布式聚类算法在处理海量数据时采用的并行策略不合理以
【机 构】
：
西南交通大学信息科学与技术学院,成都,610031西南交通大学信息科学与技术学院,成都610031;南京大学计算机软件新技术国家重点实验室,南京210023;
论文部分内容阅读
在大数据时代,数据规模的不断扩大,数据的多样性愈发突出,提高分布式聚类算法的结果质量逐渐成为关注的焦点.针对多数分布式聚类算法在处理海量数据时采用的并行策略不合理以及聚类结果不理想等缺陷,提出一秘基于弹性分布式数据集(Resilient Distributed Datascts,RDDs)的分布式聚类集成算法(DisCE).该算法首先设计一个基于RDDs的分布式邻接表,解决关联数据在分布式环境中的表示和存储;其次利用分布式的共识函数模型,综合几个海量基聚类结果并用分布式邻接表表示:最后运用改进的分布式近邻传播算法(MDAP),划分分布式邻;接表为最终的聚类结果.实验结果表明,新提出的算法对数据规模有很好的适应性,在有效提高聚类结果质量的同时可大幅减少运行时间.
其他文献
互联网发展到今天,基于Web和数据库架构的应用系统已经逐渐成为主流,广泛应用于企业内部和外部的业务系统中。在网络高速公路不断拓展,电子政务、电子商务和各种基于Web应用的业务模式不断成熟的今天,却有报道称全球电子商务的发展正在下滑。究其原因,根源在于近两年关于网络钓鱼、SQL注入、木马和跨站脚本等攻击事件带来的严
桩基检测是确保桩基质量和桩身稳定性的重要内容.低应变检测技术是一种广泛使用的桩基检测方法,这种方法可以准确评估桩基的质量,并确定桩身的稳定性.本文通过总结低应变检测
“一年之计在于冬”，冬棚成功与否对于养殖户来说至关重要，只要冬棚养得好，整年基本都亏不了。笔者就冬棚前期工作如何做才能打好基础进行解析。
现阶段,社会经济文明的发展变化,给各个行业都带来了新的挑战.一直以来,建筑工程都是我国的重要行业,建筑工程的建设质量,不仅影响着社会经济的发展,更加关系到人们的生活质
钢结构防火保护技术是钢结构应用和发展中必须解决的问题。本文简述了钢结构防火保护技术的发展和现状 ,着重介绍当今国内外新型防火板材的有关情况 ,并以目前大量使用的钢结
工学结合的教育模式是如今大学教学的一个发展趋势,也是大学教学改革的方向,本文就工学结合模式下网络营销教学改革进行研究,分析我国网络教学的现状,以及探讨工学结合下网络
在经济技术全面发展的时代进程中,机电安装的重要性不容忽视,提高机电安装工程质量,就等于是为我国国民经济的发展提供了经济有效的助推力.从本质上来说,机电安装工程施工具
何去何从在各级有关部门忙于年终总结政绩和整理经验的时候,山西的5声巨响把人们的注意力从成绩转移到了问题上。为什么死看死守却看不住违法开工,答案曰:利益驱动。小煤矿