基于大数据的农产品网络舆情监测系统研究与实现

来源 :吉林农业大学 | 被引量 : 0次 | 上传用户:liujing6633
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的飞速发展,网络便捷的服务及民众参与意识加强,网络已经成为民众舆论阵地,各种社会现象问题在网络舆论的发展下悄然放大。网络舆情的表现通过网络新闻评论、自媒体、搜索引擎和论坛等途径传播,当网络热点事件不断攀升时,网络舆情风险高频发生。如农产品的发展关乎民众生活和健康,涉农产品的安全问题在网络舆论下易被误解误读,会影响产业发展,引起民众恐慌,从而对产业造成经济损失。农产品安全网络舆情对社会影响日益增加,为正确引导农产品的网络舆论方向,使农业部门从舆论被动转为主动,及时阻止负面舆论的扩散,降低舆情热点事件的负面影响,提高农产品网络舆情监测能力尤为重要。本研究基于大数据技术搭建农产品网络舆情监测系统,在大数据平台基础上开发网络爬虫实时采集、处理分析数据、热点话题发现及追踪、舆情情感极性数值计算和可视化数据展现,利用大数据技术提升处理速度,研究目的是为增强农产品网络安全舆情监管力度,为有关部门的决策提供有效依据。首先介绍网络舆情监测的研究背景及现状,分析农产品网络舆情监测系统的需求及采用的关键技术。采集信息用Scrapy从互联网采集涉农产品相关信息作为分析数据,检索使用Solr搜索服务器,利用文本处理算法分析采集数据,实现舆情话题识别、追踪和情感极性计算。为解决传统单机运算及存储瓶颈,采用基于Hadoop分布式平台及Spark内存计算框架,通过整合多台设备实现分布式存储及高效分析处理数据。系统分为信息采集、信息处理、信息分析、舆情管理和系统管理五大模块,并对相关的算法进行改进,阐述各个模块的实现过程及所需的开发环境,对系统进行测试能及时完成所需分析任务。
其他文献
网络空间治理问题事关国家安全和社会长治久安,是新时代我们面临的一项新的综合性挑战。十八大以来,我们党将网络空间治理摆在了极高的战略位置,进行了一系列的探索性实践。对这些具体的网络空间治理的探索实践进行归纳和梳理,并总结其经验和价值,对于我们更好地审视新时代的网络空间治理工作,推进网络治理能力现代化具有重要意义。首先,对核心概念进行界定。治理是对过去传统权威式、单一式管理的摒弃和超越,强调参与主体多
学位
HINOC是我国自主研发的一种用于连接光纤网络和用户家庭网络的新型宽带接入技术。该技术在FTTB的基础上,利用小区楼道和户内已经敷设、分布广泛的有线电视同轴电缆,构建高速的信息接入网[1]。目前成熟的HINOC 2.0接入技术可支持单通道1Gbps双向通信,平均延迟小于2.5ms,各项性能指标远超同类同轴通信技术[2]。与此同时,HINOC技术的产业化也在同步推进过程中。2017年,HINOC试验
磁共振成像(Magnetic Resonance Imaging,MRI)是一种能够提供人体结构和功能精确信息的医学影像学成像技术,它对软组织成像具有良好的对比度,且没有射线损害。MRI最主要的缺点是成像速度较慢。为了在提高MRI速度的同时保证成像质量,本文研究利用稀疏优化理论方法,设计有效的磁共振成像稀疏重构算法来改善MRI重构的性能。本文的主要研究内容如下:(1)基于小波树重叠组稀疏结构的组稀
5G天线位于整个通信系统的前端,负责收发信号,对系统起着举足轻重的作用。本文设计的两款适用于5G频段的天线,采用陷波的方式使天线的工作频段在3.4-3.6GHz。设计的5G天线还应符合天线对于增益、辐射方向等参数的要求。在天线的工作频带范围内,天线的增益要大于等于3dB,在辐射方向上也要有良好的效果。具体的设计如下:首先设计了一款宽带单极子天线,在此天线基础上进行双陷波。选择介电常数为4.4,损耗
移动互联网技术悄然改变着人们的生活,在导游自由执业的政策背景下,旅游市场中网约导游平台大规模发展,将游客与导游以新的流程逻辑重新连接起来。由于网约导游市场前景广阔,进入市场的竞争者越来越多,市场竞争压力增大。在对消费者的青睐和导游资源的争夺上各家网约平台都不遗余力。平台导游加盟的数量和质量决定了平台能够提供产品的数量和品质,丰富的产品数量种类和品质可以吸引更多的游客使用平台。平台的服务质量水平是吸
学位
伴随着计算摄影学新型学科领域的兴起及光场成像理论的发展,光场相机成为近十年来国内外诸多领域关注的热点。相对于传统相机,微透镜光场相机在主镜头后加入了微透镜阵列同时
学位
雷达目标检测作为雷达信号处理的重要组成部分,是实现雷达目标跟踪、成像及识别的前提和基础,一直受到国内外研究人员的关注。随着无线电技术的不断深入发展,雷达探测范围涵盖了陆海空天,但电磁环境日益复杂多变,并且目标的隐身能力日益增强,如何在复杂环境下对目标进行有效检测,成为了雷达目标检测面临的首要难题。本文主要针对复杂环境下雷达目标检测算法进行研究。该复杂环境一方面来自于杂波的非均匀性和起伏特性,另一方