【摘 要】
:
随着工业化的发展,日益严重的环境污染给人们的生活带来了巨大的影响,为了加强城市环境污染监测,重点城市均开展了大规模的环境质量监测站基础建设。环境监测数据也随之呈现快速增长趋势,而目前的数据存储手段不利于数据的高效存储,导致数据库频繁出现数据缺失和异常等问题。近几年,Hadoop分布式存储技术为高效存储环境质量监测数据和解决“信息孤岛”等问题提供了新方法。本文基于Hadoop框架设计了大数据环境监测
论文部分内容阅读
随着工业化的发展,日益严重的环境污染给人们的生活带来了巨大的影响,为了加强城市环境污染监测,重点城市均开展了大规模的环境质量监测站基础建设。环境监测数据也随之呈现快速增长趋势,而目前的数据存储手段不利于数据的高效存储,导致数据库频繁出现数据缺失和异常等问题。近几年,Hadoop分布式存储技术为高效存储环境质量监测数据和解决“信息孤岛”等问题提供了新方法。本文基于Hadoop框架设计了大数据环境监测系统,解决了环境监测系统无法有效处理海量数据、环境质量数据存储不规范以及环境质量数据修复可靠性低等问题。具体工作如下:首先,根据国内外大数据和数据修复的发展现状和存在的问题,介绍了环境质量监测系统构建的关键技术,包括Hadoop框架、数据采集与预处理以及数据修复等,为构建环境质量监测系统的奠定基础。其次,提出大数据环境质量监测系统的整体架构设计,针对系统各功能层进行了具体详细的设计研究。分别从数据采集、数据存储、数据分析和数据应用等方面进行需求分析,在大数据技术的理论支撑上,完成了基于Hadoop大数据环境监测系统的设计工作。然后,在整体架构设计的基础上,完成了大数据环境监测系统的搭建,为环境质量数据修复提供了保障。针对环境监测质量数据具有非平稳性和非线性的特征,提出了基于中值滤波器(MF)、经验模态分解(EMD)和整合移动平均自回归模型(ARIMA)的环境质量修复模型,从而提高修复精度。最后,在完成系统测试的硬件环境、软件环境和软件程序部署后,对环境质量监测系统的数据采集层、数据文件存储层、数据预处理层、混合存储层、数据访问层和数据应用层进行了功能测试,以及数据查询和数据导入的性能测试,从而完善系统功能,提高系统性能。本文重点搭建大数据环境质量监测系统,并研究环境质量数据修复模型,经实验数据验证,该模型有效提高了环境质量数据的修复精度,MAE、RMSE、RMSE的改进分别达到67.1%、61.1%和65.3%,为基于Hadoop环境质量修复系统提供可靠数据库,以及环境污染预防提供了可靠保障。
其他文献
IFRS15准则于2014年5月发布后,我国《企业会计准则第14号——收入》准则(以下简称“新收入准则”)也随之发布,并规定在2021年起,国内所有企业都应该采用新收入准则。新收入准则将原来的收入准则与建造合同准则合并为一体,建立适用于各种行业的收入模型,此规定影响众多行业,其中建筑行业影响较大。近些年,政府与企业合作,共同建设许多公共基础设施,带动了建筑行业的发展。PPP+EPC是政府与企业合作
《中华人民共和国国民经济和社会发展第十四个五年规划和2035年远景目标纲要》中提出,要健全党组织领导的自治、法治、德治相结合的城乡基层社会治理体系和党组织领导、村(居)委会主导、人民群众为主体的基层社会治理框架。社区作为社会治理的最小单元,是实现这一目标的关键。目前,城市社区治理的主体更加多元化,如何消除多元主体间的分歧和冲突,增进沟通交流和资源共享,找到多元主体有效参与和良性互动的有效途径,对促
目的:探究臭氧水疗联合引血疗法治疗慢性难愈性创面临床效果。方法:选择本院2018年10月到2019年10月间收治的慢性难愈性创面患者作为研究对象,从中随机抽出病例数80例,将其按照治疗方式不同分成对照组、观察组。对照组给予臭氧水疗,观察组在对照组基础上加以引血疗法,对比临床疗效。结果:观察组患者总有效率为97.50%,高于对照组患者的总有效率72.50%,组间数据对比:P<0.05。结论:臭氧水疗
目的:分析中药复方穴位贴敷联合心可舒片对冠心病稳定型心绞痛的干预效果。方法:选取118例冠心病稳定型心绞痛患者,按照随机数字表法分为对照组59例(口服心可舒片联合常规西药干预)及观察组59例(在对照组的基础上联合中药复方穴位贴敷),两组均治疗8周。比较两组治疗后的临床疗效;比较两组治疗前后的西雅图心绞痛量表(SAQ)评分、中医证候积分、心功能指标及血液流变学指标。结果:治疗8周时观察组总有效率为9
2008年我们为移动通信公司的即有建筑进行了改造,现将植筋技术在建筑结构改造施工中的应用作如下介绍。
<正>日常数学教学中,学生经常会面临各种各样的问题,如难以理解数学知识,对数学解题方法的应用反复出错等。这需要教师运用数学微专题帮学生突破难点,掌握重点。下面笔者就数学微专题的使用原则谈一下个人理解。把握时机,关注学情做好引导数学微专题常应用于当学生作业中出现大面积共性问题,测试中出现比较集中的失分现象,或理解数学概念中出现偏差的情况。
风力发电机是一种可以将清洁能源转化为电能的复杂机械设备,需要有效可行的监测运维系统来保障其服役期间的安全性、可靠性以及经济性。而风机齿轮箱作为风电设备传动系统中最关键的一环,对其进行实时的健康状态评估和故障预警尤为重要,相关方法体系及技术路线也亟需建立。基于此,本文以风机齿轮箱为研究对象,根据实时振动信号提出了以“降噪-评估-预警”为着眼点的技术路线。本文的主要研究内容如下:首先,对风机齿轮箱内部
风电机组齿轮箱轴承作为风电机组运行的重要部件,在恶劣环境中长时间运行极易发生故障,导致经济损失,因此,对风电机组齿轮箱轴承进行早期故障诊断以确保风电机组正常运行具有重要意义。本文针对风电机组齿轮箱轴承故障振动信号存在的故障特征微弱、干扰大以及非平稳非线性等问题,首先利用改进的小波包变换(Wavelet Packet Transform,WPT)对信号进行降噪;然后结合变分模态分解(Variatio
<正>专业阅读是教师专业发展的重要途径,笔者所在研训机构在做好教师分层分类培训工作的同时,着力研究中小学教师专业成长规律,并围绕教师在阅读领域存在的问题,开发教师专业发展阅读研训项目,为促进区域教师专业发展提供了有效路径。笔者对所在区域普通高中部分教师的阅读状况进行调查与分析,发现仅有2%的教师能坚持每天阅读1小时。此外,教师在阅读内容的选择上偏向随意化、生活化,阅读书目常常与专业脱节,与实践割裂
<正>今年新修订的《中华人民共和国职业教育法》,进一步明确了职业教育面向市场、服务发展、促进就业的办学方向,在发展重点上,规定加快培养托育、护理、康养、家政等方面技术技能人才。近年来,盐城幼专围绕新形势下“一老一小”对家政服务市场的迫切需求,开设了一系列与家政服务相关的专业,培养了一批活跃在行业前沿的家政人才,力促家政行业“短板”成为“潜力板”,切实以专业“小切口”助推服务“大变化”。高校如何以“