基于协同过滤的个性化垂直搜索引擎的研究与设计

被引量 : 0次 | 上传用户:liuhaiyi123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络环境的变化和互联网技术迅猛发展带来的信息爆炸,使得实现对某一专题领域信息精确查找的垂直搜索引擎获得迅速发展。当下大部分搜索引擎缺乏主动性,在搜索的过程中不能考虑用户的兴趣,不能快速精准的查找用户所关心的信息。本文设计并实现在垂直搜索引擎环境中提供个性化服务的系统。并使用软件工程方法对系统进行需求分析,系统设计,完成系统的实现。首先研究当下垂直搜索引擎的发展前景,分析传统搜索引擎三个核心组成部分的功能原理,并结合当下的网络环境分析了用户的需求。并确定系统的开发的目标,设计了系统的整体架构,进而确定系统的主要功能,用户基本信息与用户兴趣管理,专题内容的抓取,基本搜索功能与相关信息的推荐功能,并确定了系统中关键数据流的转换。同时抽象出系统的角色与用例,对用例进行详细的说明。然后探讨了基于协同过滤的推荐引擎的基本原理和方法,并基于协同过滤思想,结合中文分词建立基于兴趣的用户模型,通过聚类算法对兴趣处理生成用户兴趣类别,并根据推荐内容重新设计了Lucene提供的搜索结果排序评分算法。将推荐系统整合到垂直搜索引擎中,实现个性化搜索,从而达到提高信息的查找精确率的目的。考虑到实现协同过滤推荐用户个性化内容的用户模型设计,在系统设计部分对所需要存储的数据设计了的数据库表。分析搜索引擎的工作原理、关键技术和系统架构的研究,设计了基于协同过滤技术的搜索引擎框架。最后分析当下开源框架Lucene、Nutch、Mahout、IkAnalyzer,整合现有资源做系统原型,提高中文环境下的搜索结果的准确性,通过研究和分析网络爬虫的工作原理和中文分词技术,实现对专题信息的抓取,修改开源项目中部分接口,实现本文所设计的基于协同过滤的个性化垂直搜索引擎,并对系统整个系统进行测试。
其他文献
<正>伊凡大公的造城计划1317年以前的莫斯科还是一个不起眼的小村庄,位于两条航运线的交汇处,地理位置优越。自从善于理财、号称"钱袋子"的伊凡一世大公掌管这里以后,莫斯科
目前,我国汽车产业得到前所未有的发展,城市居民出行结构发生了深刻的变化,小汽车出行比例大幅度增加,居民出行机动性提高,同时导致道路资源极度短缺,交通拥堵现象从最初的北上广逐
爷爷的军功章王洪爷爷总爱抚摸那一枚枚早已失去光辉的军功章抚摸他在枪弹中淬火的以往抚摸时抖出一些沉重的故事将我的童年哺养爷爷的军功章浓缩着一个民族苦难的历程铭刘着
期刊
目前,免疫抑制剂治疗原发性肾病综合征在医疗领域倍受关注。他克莫司是一种强效大环内酯类免疫抑制剂,近年来开始应用于原发性肾病综合征的临床治疗,但疗效和安全性尚不十分明确
大学生作为社会群体中较为激进而又纯粹的消费者且兼具高素质的特殊人群,他们会通过在课堂上老师传授的或课外自学的投资知识与炒股技术,而尝试着以锤炼自身的理财意识、投资
目的:本研究以调查在吉林大学第二医院进行血液透析患者的基本情况,分析血液透析患者贫血程度、发生原因、贫血治疗达标情况为研究目的,探讨我院血液透析患者贫血发生的特点及相
目的:回顾性调查分析我院原发性儿童肾病综合征的诊疗现状,了解原发性儿童肾病综合征实际应用过程中的“依从性”,为评估并完善小儿肾病综合征治疗方案奠定基础。方法:采用回顾性
背景:非酒精性脂肪肝是常见的慢性肝病,其特征为大量脂质在肝细胞内积聚。非酒精性脂肪肝与心血管疾病危险因素如:高血压病、2型糖尿病、高脂血症、肥胖、胰岛素抵抗等关系密切,
目的:观察右美托咪定对老年甲状腺癌根治术行全身麻醉患者术后认知功能障碍(POCD)和炎症反应的影响,并探讨其相关机制。方法:选择选取2011年3月~2012年3月在吉林大学白求恩第一医院
IL-25即IL-17E,是IL-17家族的新成员,2001年,由Fort等~[1]首次报导,普遍认为IL-25在过敏反应性疾病中发挥着重大作用,已有研究表明:IL-25通过与其受体IL-17RB结合,介导Nuocyte连接固有