【摘 要】
:
针对我国目前航班延误平台的移植难、可扩展性差,无法适应民航高速发展所带来的大数据量存储的现状,设计了面向大数据的跨平台、高适用性与高扩展性的航班延误平台。该平台以
【机 构】
:
中国民航大学天津市智能信号与图像处理重点实验室
【基金项目】
:
国家自然科学基金资助项目(11402294);天津市智能信号与图像处理重点实验室开放基金资助项目(2017ASP-TJ01)~~
论文部分内容阅读
针对我国目前航班延误平台的移植难、可扩展性差,无法适应民航高速发展所带来的大数据量存储的现状,设计了面向大数据的跨平台、高适用性与高扩展性的航班延误平台。该平台以大数据工具Leaf Let为可视化载体,在地图界面实时显示航班轨迹并将轨迹数据加载至HBase数据库中,并且利用信息摘要算法(MD5)重新设计与优化航班数据表的行键,以解决其递增的飞行时间特性产生的"热点"问题;针对HBase过滤器多级查询的缺陷,提出了基于Solr Cloud的关联查询算法,利用Solr Cloud实现对行键与索引字段的分层存储,从而实现HBase二级快速索引;最后在HBase的历史航班数据与飞行计划数据基础上,构建基于Hive的海量航班信息数据仓库。实验结果显示,航班延误大数据平台的可扩展性与搭建的航班信息数据仓库可以满足民航对数据集中统一存储的需求,而多条件查询的响应速度与无二级索引的集群相比提高了上百倍,并且这种优势随着航班数据量的增长愈发明显。
其他文献
随着人民生活水平的不断提高,居民的住宅条件也在不断改善,消费者在购买住宅时在居住环境和功能等多方面有着更高的要求。生态住宅理念为房地产的未来指明了发展方向。论文主
津秦客运专线跨越京山铁路采用7X16m预应力连续箱梁跨越,跨越方案为连续梁+框架墩,施工方法为顶推施工。为减少临时设施,施工中不施加临时预应力。考虑日照影响,分析了在顶推过程
大孔树脂技术具有吸附效果好、性质稳定、成本低廉等优点,已被广泛用于中药生物碱类成分的富集纯化中。本文按生物碱的结构类型分类,综述了大孔树脂在各类天然生物碱分离纯化
通过对辽宁科技大学教学楼教室照明情况的问卷调查以及实地测量,发现大学教室照明存在诸多问题。经分析,改变教室灯具型号、灯的控制方式等方法不仅可以改善教室照明情况,而
<正>今年2018年6月,北美洲最大的挂车制造企业Wabash National(以下简称Wabash)将经历一次历史性的变化。在一个为期六个月的交接过程中,长期服务与Wabash公司的首席执行官Di
本报讯 记者从市劳动和社会保障局获悉,为提高农民工依法维护自身权益的能力,督促用人单位自觉遵守劳动保障法律法规,从今日起,我市开始进行为期15天的大规模维护农民工劳动保障