面向特定领域的话题检测系统的设计与实现

来源 :北京邮电大学 | 被引量 : 2次 | 上传用户:memeshan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
移动互联网的发展使得人人都可以随时随地地制造信息,而微博作为国内使用人数最多的社交平台,每天都会产生海量的信息。社交网络的数据包含了大量与当前社会热点事件紧密相关的信息,随着大数据时代的到来,越来越多的人文社科专家利用计算机技术来辅助研究。而通过研究社交平台的数据可以挖掘出民众中讨论的一些热点话题或事件,这些可以应用于社会学研究中用于跟踪民众对于政策或者事件的反响,具有一定的研究价值。在挖掘微博话题的过程中,针对短文本的噪声多、特征稀疏等特征,本文改进了特征提取与文本向量化部分,使得在特征抽取时能尽可能地抽取到具有完整语义的特征。根据调研,本文选择新浪微博作为研究对象。针对微博平台用户与文本数据的特征,本文提出了利用重复串改善分词以及利用doc2vec生成的句子向量做特征扩展的方法和模型。然后使用聚类算法进行话题检测,通过多组对比实验证明了方法的有效性。本文对这一过程中涉及的关键技术进行了调研与分析。在基于doc2vec的微博话题检测模型的基础上,本文最终设计并实现了一个面向控烟领域微博数据集的微博话题检测系统。系统利用网络爬虫采集了 2017年3月至6月份共353797条微博数据作为研究对象,对原始数据进行了文本清洗、文本向量化等预处理工作后,使用优化了初始化质心的k-means++聚类算法进行文本聚类,最后对结果进行主题词抽取来实现话题检测。另外系统还能进行单文本分析,通过输入日期还能自动生成周报以及月报,使用户能够直观了解到某段时间内微博平台上用户产生的话题以及数据趋势走向情况。
其他文献
豆科植物决明(Cassia obtusifolia L.)或小决明(Cassia toraL.)的干燥成熟种子称为决明子,是药食两用的种子,其主要活性成分为多糖及蒽醌。《中华人民共和国药典》记载决明子
环境侵权因果关系举证责任分配规则不仅是法学家所关注的热点问题,也是让司法公正实现与否的重点所在,但《侵权责任法》和相关司法解释对此问题的规定却并不清晰,这让法官在司法实践中有不同程度的困惑。故本文借助水污染责任纠纷案的两个争议焦点,阐述因果关系举证责任如何在农业公司和公路公司两方当事人之间进行分配。首先,本文对环境侵权因果关系进行类型化分析,针对不同类型因果关系采取不同的举证责任分配方式,其次,认
目的:利用聚苯乙烯荧光纳米粒进行单线态氧通道的光激化学发光均相免疫检测技术是第三代均相免疫分析技术,该技术的优点是待测物质的检测范围宽,均相体系、快速、稳定,灵敏度较高,检测过程中也不需要荧光标签的引入,避免了空间位阻影响生物分子的相互结合,还可用于检测生物学粗提物而不会影响测读效果。然而,目前国内对于此方面的研究不够健全,这是因为检测所需光激化学发光纳米粒子主要依赖于进口,试剂盒原料较贵,导致应
随着我国铁路事业的高速发展,列车的运行速度也在不断提高,列车空气动力学问题显得越来越突出。我国铁路沿线地形和地貌复杂,不少地区常年遭遇大风侵扰,形成多种不同形式的路堑。由于路堑坡率、路堑深度等不同路堑结构使车辆气动力急剧增加。自然界的风速和风向往往随着地形的改变而发生突变,因此,研究突变风下路堑结构对高速列车气动性的影响,对保证列车运行安全十分重要。本文建立高速列车在路堑中行驶的空气动力学仿真模型
当前,在经济和社会的许多领域,软件的作用越来越重要。对于软件开发的相关人员和机构而言,除了关注软件的功能,人们也更加关注软件的非功能需求。在许多软件特别是银行软件的开发使用中,人们对软件的非功能需求,例如可靠性、安全性等有了更高的要求。软件非功能需求的正确识别、规定、实现是软件开发成功和有效使用的基础。因此,对软件非功能需求进行研究是十分必要和有价值的。本课题以银行软件非功能需求评价这样一个在研究
1918年9月15日,陈衡哲留美期间发表了现代湖南新诗史上第一首白话新诗《人家说我发了痴》,拉开了现代湖南新诗创作的序幕。现代湖南新诗的创作历程大体上与中国现代新诗创作进程同步,表现出较为明显的阶段性特征。1920年代(1918-1927)是湖南新诗创作的尝试探索期,部分诗人在不断摸索中形成了自己的风格,湖南刊载新诗的文学报刊大量涌现。1930年代(1928-1937),湖南诗人的创作呈现出逆势突
道路除冰一直是国内外交通养护部门重点关注的问题。冬季冰雪覆盖使路面摩擦系数降低、车载制动作用不足,导致交通事故频发。为有效解决该问题,引入电磁感应加热技术,系统评价沥青路面新型除冰技术的适用性。本文拟选用钢丝绒纤维作为感应加热材料掺入至沥青混合料中,开展基于感应加热的钢丝绒纤维沥青混合料路用性能与除冰性能研究。首先,探究不同钢丝绒纤维长度、掺量对沥青混合料高温稳定性、低温抗裂性和水稳定性等路用性能
气候变化是当今国际社会国别合作与博弈的焦点,发达国家以应对气候变化的重大挑战为契机,形成了低碳发展的执政理念,并采取了一系列措施力图在未来的产业竞争等方面抢占制高点。而对于我国来说,发展低碳经济是可持续发展的内在要求,也是实现跨越式发展、参与国际竞争与合作的可行途径。低碳发展的关键是转变能源利用方式,以新能源代替传统能源,而煤炭是我国的主体能源和基础产业,从很长一段时间来看,以煤炭为主的能源发展格
在本篇论文中,我们研究二维稳态非线性磁薛定谔方程(?)在(?)Ω上,(0.1)其中Ωα是R2内光滑有界区域且指数p>1,ε>0是一个小的正参数,V是Ω上正的、光滑的位势函数,v表示Ω的
背景DNA甲基化是表观遗传学的一种重要机制,在调节基因复制和蛋白质表达中具有重要作用。大部分DNA甲基化发生在鸟嘌呤核苷酸或Cp G位点之前的胞嘧啶上。Cp G岛是哺乳动物基