基于Hadoop平台的职位推荐系统的设计与实现

被引量 : 0次 | 上传用户:luoxingrobin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来个性化推荐系统逐渐成为众多研究者们的研究焦点,给人们的生活和工作带来了很多便捷。但是随着网络求职招聘的信息量呈爆炸式增长,简单的职位搜索可能难以满足求职者的需求。尽管职位推荐技术越来越得到广泛的应用及普及,但是很多招聘网站并没有针对求职者的历史行为进行分析与发掘。本文对基于求职者行为分析的职位推荐系统的构建进行了深入的研究,针对基于传统的职位搜索与浏览的推荐现状在实际实施过程中面临的问题,提出了对求职者的Web行为日志分析的方法,运用基于内容的过滤、基于人口统计过滤与协同过滤推荐技术,设计与实现了一种基于行为分析的个性化职位推荐系统。本文主要研究内容和工作如下:(1)将基于内容的过滤、基于人口统计过滤与协同过滤推荐技术应用于个性化职位推荐系统中。通过对求职者的Web行为日志分析,将求职者行为分为注册、浏览与申请行为,构建求职者-职位模型,结合求职者的概要与求职意向等信息,采用线上实时收集求职者行为数据、离线数据分析与在线实时计算相结合的方式为求职者提供实时推荐服务。本文推荐服务分为求职者登录求职网站触发的职位推荐和求职者成功申请职位时触发的职位推荐,通过对系统的准确率和召回率约束以保障该推荐系统的开发质量。(2)采用基于内容的过滤和基于人口统计的协同过滤技术来实现求职者登录求职网站触发的职位推荐服务,利用各自技术的优缺点对推荐结果进行优化。根据求职者的求职意向与职位内容的匹配度对职位进行过滤,使用局部加权相似度法计算求职者-职位之间的相似度,构建求职者-职位层次结构模型确定局部相似度的权重系数,使得到的推荐职位更加具有可解释性。(3)采用协同过滤技术来实现求职者成功申请职位时触发的职位推荐服务。构建求职者-职位特征向量组合,包括求职者兴趣度、职位新鲜度和职位相似度,根据求职者申请的职位id和职位相似度的阈值对职位进行过滤,正负样本收集以及机器学习最优化权重,通过求职者-职位的逻辑回归分数为求职者提供推荐服务,使得到的推荐职位更加准确。(4)本文的数据存储、关键算法和求职者-职位模型是基于大数据平台Hadoop来实现,在线推荐服务是基于具有流计算能力的分布式平台Storm来实现,既可以支持海量数据的存储与计算,也可以提升在线推荐的响应速度,同时基于日志采集系统Flume和消息缓存系统Kafka实现数据的收集和传递,最终完成职位推荐系统。最后,本论文对提出的职位推荐系统进行了功能与性能的测评,验证了该系统具有实际应用价值。
其他文献
外耳湿疹是耳鼻咽喉科常见病、多发病,为发生在耳廓、外耳道、及其周围皮肤的多形性皮疹,主要特征为瘙痒、多形性皮疹,易反复发作。皮肤上可出现弥漫性潮红、红斑、丘疹、水
<正>一、课题的提出(一)研究背景:1、适应教育发展的需要为了适应教育的发展,国家新一轮的教改制定了新课标,它以提高全体学生的基本素质为目的,以提高学生的自主性和创造性
会议
黄酮类化合物是植物特有的多酚类化合物,具有抗氧化、抗炎、抗肿瘤、改善血液循环等生理功能,在保健品、化妆品和医药等方面具有广阔的应用前景。黄酮类化合物主要通过植物提
本文以长白山野生乌杆天麻为研究对象,选取阜新市彰武县四合城林场的樟子松林为主要研究地点,对长白山乌杆天麻进行了连续三年的栽培试验,跟踪测定天麻的单株产麻个数、单株
随着我国经济发展和网络媒介的普及,电子商务近年来发展迅猛,在拉动物流配送需求快速增长的同时,也对物流快递行业提出了更高的要求。传统的配送模式受制于人力、成本等约束,
苏轼其人学识广博、诙谐幽默、洒脱无拘,有天真烂漫的赤子之心,亦有忧国忧民的家国情怀。其流传后世著作颇丰,特别是题跋数量众多,这种重要的艺术形式是其思想与情绪的自然流
综合评述了干法脱除含硫化氢尾气的各类净化方法及适用条件。通常干法脱硫效率较高,脱硫剂大多不能再生,主要适用于低含硫气处理,特别是用于气体精细脱硫。
环境作为一种社会存在和特定的时空,在很大程度上影响着人的观念和行为,对人的素质养成产生了很大的影响。但环境是如何影响人的素质养成的,它为什么具有教育引导、规范约束
新麦26是高产优质型强筋小麦新品种。介绍了新麦26的特征特性、主要品质指标、当前应用情况,并展望了利用前景,以期充分挖掘该品种利用潜力,为种植业结构调整提供品种支撑。
<正> 人为修建虾池具有其特殊的生态系统,为了达到使对虾能迅速生长,就得投入足够的铒料,为了获得更多的产量就要在单位面积内投放较自然量大得多的虾苗。由此产生虾池内一系
期刊