基于Hadoop的智慧旅游评论数据情感分析

来源 :西南科技大学 | 被引量 : 0次 | 上传用户:tianxiuli_ok
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人民生活水平的提高,对生活质量的逐渐重视,越来越多的人倾向于外出旅游,而智能终端的普及和移动互联网的快速发展,涌现出了一大批线上旅游网站,使得人们随时随地的借助网络获取旅游信息、预定旅游产品,发表旅游评论,分享旅游心得等。这些评论数据在各个旅游网站上,却缺乏有效的处理和应用,传统的数据处理和算法已经满足不了数据暴增带来的性能瓶颈,基于大数据云平台的分析处理已经成来一种趋势。本文着眼于当前现状,构建一个旅游网络评论数据处理平台,能对评论数据进行分析处理。由于网络评论数据呈现爆炸式增长,使用了大数据处理平台Hadoop进行数据的存储和分析计算,基于Map Reduce并行框架的算法设计,能有效的处理传统数据处理平台无法解决的数据量。在进行情感分析时,首先对评论数据进行了预处理,采用依存句法分析来提取评论数据的情感词和评价对象,依据旅游评论数据构建了一个旅游评价数据的情感词典,用情感词典来进行特征的选取。对NB和SVM、KNN进行并行化的改造,并在评论数据上进行倾向性分类实验,对比准确度、召回率和F值。在确定情感倾向性上再通过LDA主体模型实现各个主题下的主题词。本文结合自然语言处理对评价数据进行依存句法分析,使评论数据在进行LDA主体模型之前就进行了数据去噪,使得情感词汇和评价对象在主题词中的出现概率得到提高,最后提出两种语义约束规则,使主题模型按照规则进行词聚类,结果表明该方法在评论数据情感分析方面的有效性。
其他文献
罗马统治时期的古代埃及,留下来大量的土地租约,为我们研究古代埃及的农业经营方式提供了宝贵的资料。"正如其它的法律文献一样,土地租约也采用标准形式,使用一定的套语,人们
[目的]明确制盐企业存在的职业病危害因素,为制盐企业提供职业病防制对策。[方法]选择3家不同生产模式企业为调查对象,对生产原料成分、生产工艺等进行现场职业卫生调查并对
目的系统评价视网膜静脉阻塞(RVO)的危险因素以对其进行有效的预防和治疗。方法检索Cochrane图书馆、PubMed数据库、Embase数据库。文献检索起止时间均从建库至2018年12月,收
文章对CVAR在投资组合管理中的应用进行实证分析,选取了2009年四季度某基金的价格数据作为实证研究的基础,使用了边际CVAR,成分CVAR和增量CVAR法对组合进行综合的风险评估,并
目的探讨注射用右旋雷贝拉唑钠治疗消化性溃疡合并上消化道出血的疗效和安全性。方法采用随机、双盲双模拟、阳性药物平行对照的多中心临床研究方法,选取2016年8月至2018年4
本文从现代环境艺术设计发展概况入手分析,进而探讨了绿色生态观的内涵,重点论述了现代环境艺术设计中绿色生态观的体现。以期使现代环境艺术设计本身绿色化,同时向受众传达
于5月8日下午在北京展览馆隆重举行。本次会议由中国工程院、工信部、中国科协共同主办,由中国机械工程学会、中国科协智能制造学会联合体、德国机械设备制造业联合会、中国
金融体系将是构建中国经济双循环的战略重器,将在三大维度发挥积极而深远的赋能作用。在"全球-历史"大坐标系下,无论是内循环还是外循环,均将蕴含双维度的动态演进。其一是循
在与信息论中的熵函数有关的一种新的加权对称熵损失函数下,用参数估计方法研究了寿命服从几何分布的产品可靠度的估计问题。得到了可靠度的贝叶斯估计的一般形式与精确形式