社交网络数据采集及传播路径分析

被引量 : 6次 | 上传用户:wenjie033
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在互联网高速发展的今天,网络用户的快速增长直接导致了互联网上的舆论呈现出爆炸式的增长,尤其是当社交网络平台的出现之后,舆论的传播更加是不受控制。舆论监控也成为近年来研究的重点问题。本文主要针对现今社交网络中最具有代表性的两个平台Facebook和Twitter进行研究。研究过程主要分为两部分:第一、设计一套优良的采集系统针对Facebook和Twitter进行数据采集,设计过程中,我们分析了两个平台的登陆授权协议OAuth的工作原理、针对不同对象数据采集的API格式和第三方SDK的使用。考虑到Facebook的好友获取局限性,我们针对Facebook使用基于HTTP流和API结合的方式来获取用户数据,而Twitter使用API获取用户数据的方式。最后针对Facebook和Twitter获取数据的性能进行比较。第二、针对获取到的社交网络数据进行分析处理,首先对抓取到的240W条的推文消息进行过滤操作,区分出中文和英文;然后分析推文的转发格式,对推文进行预处理,通过正则表达式提取出转发关系,最后使用基于simhash的方法对预处理后的推文进行去重操作,统计重复推文数据,分析实验结果。之后收集去重过程中的实验数据,针对相似的消息和含有明确转发关系的消息分别使用基于时间序列和第四章中的类似于树状排序的算法对消息进行排序操作。经过排序后的消息,我们按照复杂网络工具gephi的文件格式gexf进行写入保存操作,生成消息传播路径图。通过gephi工具查看传播路径图的消息源头。最后分析生成的所有传播路径图,总结出一些典型的传播形态。
其他文献
目的:观察灸法治疗寒凝气滞型顽固性呃逆的疗效。方法:64例患者随机分为治疗组32例,取中脘穴、膈俞穴、一侧足三里穴,另一侧内关穴艾灸。对照组32例,常规肌肉注射胃复安。结
<正> 梨状肌综合症是临床常见病,笔者运用理筋配合“复方桃红汤”治疗取得较好效果,现选一例报道如下。王某,男性,42岁,搬运工人,于1993年3月14日求诊。自述无明显外伤史,出
<正> 在吉林方言中,存在一种由单音及物动词加上词尾"巴"构成的双音动词。这种动词,虽然在吉林方言中广为流行,但并不为吉林方言词汇所独有;在黑龙江、辽宁、河北、山东等省
建筑装饰作为建筑中的一项专题,是人类社会文明成果的重要体现,它集中的反应了某一时期,当地的政治、经济、文化、生产、生活、宗教信仰等方面的状况,同时对于传统文化的传承来说
从奥斯卡最佳动画短片的日趋国际化、多元化和艺术水准不难看出其审美标准的逐渐演变和发展,从最初的杂耍式逗乐到富有较强的人文性、情趣化和意蕴深刻的成熟动画艺术形式,它
<正>内容主旨统编版初中历史义务教育教科书(五·四学制)共六册,其中《中国历史》四册,《世界历史》二册。"中华人民共和国成立"是《中国历史》第四册第一单元第1课,下设"中
我国在党的十八届三中全会上提出了建设“法治中国”的奋斗目标,在党的十八届四中全会上提出了全面依法治国的方略,法治由此成为治国理政的题中之义。而基层政府作为直面群众
卵巢转移性肿瘤是指从其他器官转移到卵巢的肿瘤.1985年1月至2001年2月,我们共收治卵巢恶性肿瘤患者549例,其中卵巢转移性肿瘤44例.现分析如下.
农业面源污染已是我国总面源污染的第一大来源,而水污染是农业面源污染最大污染源之一。由于面源污染的复杂性,防治农业水污染,"防"胜于"治"。随着现阶段我国科学技术的飞速发展,
我国是一个农业大国,农业作为支撑国家经济发展的基础而始终被历代领导人所重视,它关系到国家的政治、经济以及社会的稳定。农业在我国的经济发展中发挥的作用极为关键。作为农