面向Tor暗网的数据采集与分析系统研究与实现

来源 :海南大学 | 被引量 : 0次 | 上传用户:sb871697914
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在互联网和通信技术高速发展的今天,网络给人们带来便利同时其负面影响也越来越被人们所关注。由于暗网隐匿性强以及交易方式的特殊性,大量售卖公民信息、提供黑客工具、买卖毒品等非法事件充斥其中。在暗网上的网络犯罪比表层网络更具隐蔽性,这加大了执法机构对暗网数据的取证及监管的难度。Tor暗网隐藏服务是目前最为流行的暗网之一,是各类违法内容的主要载体,如何获取尽可能多的Tor暗网隐藏服务数据并对其内容实体、非法事件进行检测与分析是对暗网内容进行监管的重要组成,因此,研究面向Tor暗网的数据采集与分析技术具有重要意义。本文主要工作包括以下几个方面:(1)本文结合综合提取链接和主动提取链接方式,重点通过部署带有HSDir标记的服务器节点,主动生成链接。此外,通过部署分布式爬虫网络,结合广度和深度爬取策略对采集到的链接进行页面内容的获取,将该部分采集到的内容作为分析阶段的数据源。本论文在较短时间内获取了十万级的Tor暗网地址链接和页面内容。(2)研究了面向Tor暗网的数据分析技术,首先结合预训练模型BERT和正则匹配技术对采集到的Tor暗网文本内容进行信息实体识别,包括主体、组织、地点、邮箱等信息实体;然后使用TextRank自动摘要技术概括了文本的核心内容,与信息实体共同构成了事件库;最后结合触发词和文本相似度设计了根据确定事件进行事件检测的方案,利用词相似度对触发词进行了推荐,最终形成了可扩展的触发词库和事件库。(3)本文设计并实现了面向Tor暗网的数据采集与分析系统,该系统通过离线计算,设计了后台程序,将中文暗网词云、事件分析统计、暗网涉及省份统计、语言页面占比统计进行了首页展示;为了展示更加详尽的关系网络,对提取的各个信息实体进行了关联分析,并进行了可视化展示;最后,系统提供了针对爬取到的暗网内容以及事件的搜索功能,以便快速获取有效信息。综上所述,本论文设计并实现了面向Tor暗网的数据采集与分析系统。该系统可以帮助执法部门监督和掌握他们所关注的Tor暗网中的事件,提高线索排查效率,为追踪暗网犯罪提供技术支撑。
其他文献
消费市场中包括书籍刊物、名贵商品、日常百货在内的所有商品都有假冒伪劣产品的可能存在,不良厂商为了谋取暴利毫无底线的损害着商家和人民的利益,对我国的经济发展造成严重影响。数字水印技术作为一种数字产品的产权与信息保护的方法,得到了越来越多的关注与研究,近年来随着商品包装防伪的问题的不断迭出,数字水印防伪技术对隐秘信息有着不可见性的特性可以很好的解决关于包装防伪的难题。本文就包装防伪提出基于抗拍照打印鲁
骨保护素(OPG)是肿瘤坏死因子(TNF)受体超家族成员,它作为核因子κB受体活化因子配体(RANKL)的诱饵受体,可以通过与核因子κB受体活化因子(RANK)竞争性结合核因子κB受体活化因子配体(RANKL),从而抑制破骨细胞的分化及活性。研究发现OPG可诱导体外成熟破骨细胞发生凋亡,凋亡可作为其抑制成熟破骨细胞活性的途径之一,由此发挥保护骨组织的作用。细胞焦亡是不同于细胞凋亡的一种新型细胞死亡
猪因其呼吸道上皮同时具有人(α-2,6)和禽(α-2,3)流感病毒受体,被认为是人和禽流感病毒间发生基因重配的重要场所。有研究表明,我国近10年来猪群中广泛流行的猪流感病毒(Swine influenza virus,SIV)为欧亚类禽H1N1(Eurasian avian-like H1N1,EAH1N1)、2009 大流行 H1N1(Pandemic 2009 H1N1,Pdm09H1N1)以
在视觉传播过程中,信息结构日趋复杂,媒介形式不断增殖,人们逐渐产生对信息秩序与规则加以把控和完善的意识。20世纪50年代的国际主义设计师总结并提炼出一套控制版面形式的方法——用系统的网格整合版面信息,以达到秩序的最大化,使信息的传达和交流更加高效、深入而广泛。如今,信息的数字化获取方式成为主流,从视觉设计的角度观察,网格设计摄入数字化界面的合理性和必要性逐渐突显。一方面,网格设计思维和视觉范式塑造
肌内脂肪含量和背膘厚度是评价猪肉品质的重要经济性状,其中背膘厚度主要取决于皮下脂肪的含量。因此,在不影响猪肉风味品质的前提下,降低皮下脂肪的沉积量是进行猪肉品质调控的关键举措。姜黄素(Curcumin,CUR)是从植物姜黄的根茎中提取出的一种多酚类物质,具有降血脂、改善脂代谢等多种生物学功能。然而,CUR在猪皮下脂肪沉积中的调控作用尚不清楚,其分子机制也有待进一步揭示。本研究包括以下4个部分。1.
情感分析已经应用于软件工程各个领域,例如APP评论、Stack Overflow技术问答网站和开发人员对API的意见等。通用的情感分析工具大都是基于电影评论或产品评论进行训练的,不适合用于软件工程领域的情感分析。研究表明在软件工程领域,通用的情感分析工具表现出了消极的结果。因此为软件工程领域定制情感分析工具是非常必要的。近来软件工程领域的情感分析得到了广泛的关注,兴起了为软件工程领域定制情感分析工
推荐系统作为信息时代的产物,能有效解决大数据背景下的信息爆炸问题,并将筛选后的有效信息快速、准确的提供给用户,为企业带来利益的同时,为用户提供个性化定制服务,从而得到了社会的广泛关注,并得以迅速发展。推荐系统将收集到的广袤信息进行整理汇总,为用户和物品间建立连接,进而预测未来可能的连接以及连接强度,通过推荐算法的设计与实现,完成符合用户兴趣和需求的合理推荐。随着推荐系统的广泛应用,用于推荐的算法层
高血压肾损害属于严重的高血压并发症,也是诱发终末期肾病(ESRD)的第二病因[1]。高血压肾损害的有效地防治,对预防和延缓肾脏疾病的形成与进展意义非凡。本次研究基于中医药基础理论为指导,分别从临床与实验两大部分入手,研究滋肾平肝方的临床效果,观察其对二肾一夹高血压大鼠(2K1C-RHR)肾损害的作用,以及在TGF β 1/Smads信号通路的调节作用,以探讨其发挥作用的可能机制。临床研究:滋肾平肝
目的:分析晚期肺鳞癌(LUSC)患者外周血中循环肿瘤细胞(CTCs)数目及动态变化与临床特征、免疫联合化疗疗效及预后之间的关系,并进一步探讨CTCs上PD-L1的表达(CTC-PD-L1)水平及动态变化与免疫联合化疗疗效及预后之间的关系。方法:选取2018年10月至2020年2月于江苏省苏北人民医院呼吸与危重症医学科首诊并接受外周血CTCs检测的39例晚期LUSC患者为研究对象,其中15例采用PD
奇异变形杆菌(proteus mirabilis,PM)是重要的人畜共患病原菌,在自然界分布广泛,常通过食物、水、粪便等途径感染人或动物,可引起食物中毒、腹泻、脑膜炎、中耳炎等疾病。近年来,随着该菌造成的畜禽发病增多和抗生素防控效果的下降亟需开展对该菌的防控研究。生物被膜(Biofilm,BF)是细菌粘附于物质表面,并通过胞外基质包裹,形成具有严密结构性的多细胞群体形态,BF可增加细菌对环境的适用