基于大数据技术和深度学习的混合模式电影推荐系统设计

来源 :东华大学 | 被引量 : 0次 | 上传用户:ososxx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在信息爆炸的移动互联网时代,人们在享受丰富网络服务的同时,也备受冗余、低效信息的困扰,推荐系统通过挖掘用户和物品的相关信息,可以为用户生成精准的个性化推荐,能够在一定程度上解决上述问题。近些年来深度学习技术的发展推动了推荐算法的快速演化,与此同时也对推荐系统的特征数据提出了更高要求。为了满足推荐算法对海量特征的需要以及数据的实时处理需求,需要使用大数据工具对数据和信息进行处理。本文基于大数据和深度学习技术,构建了推荐系统的召回排序算法并设计以电影推荐为主题的完整推荐系统。首先,召回算法使用物品和用户画像信息作为主要特征数据,设计了多路召回的策略使得召回结果更加全面。离线召回部分采用以Item2vec模型召回为主的召回方式保证召回率要求,配合标签倒排索引召回和统计召回以解决冷启动问题并增加推荐多样性。通过融合实验确定三者的最佳融合比例后,以此验证多路融合召回较单一模型在召回率、覆盖率等指标上的有效性。此外,还设计了基于用户即时行为和新热物品推荐的实时召回模块快速完成推荐。其次,排序算法的构建上使用深度学习模型充分挖掘用户的行为序列特征,将用户行为划分为长期行为和短期行为分别建模,在此基础上提出了LSIN模型。对用户长期行为利用自注意力机制抽取特征后,一方面与短期行为通过GRU单元进行序列建模,另一方面将两者通过基本注意力机制计算注意力得分,再通过MLP层拼接后预测最终的点击率。在Movie Lens和Netflix两个数据集上证明了LSIN模型相比几个主流排序模型的有效性。最后,以Movie Lens数据集作为初始数据,结合大数据处理技术、Web技术,基于上述的召回排序算法完成推荐系统的整体设计。使用Lambda架构通过离线和实时两套系统构建推荐系统的数据流框架,然后从工程设计的角度完成了数据收集、特征处理、召回集构建、召回物品排序、返回推荐结果的整个推荐业务流程,使电影推荐的业务流形成完整闭环。
其他文献
教师教学洞察力在课堂教学实践中呈现出情境性、实践性和向善性的三维特征,其表现形式包括洞察教学问题的好奇心、审思教学中的自相矛盾、处理突发情境的教学机智、应对教学知识点之间的巧合等。为促进课堂教学有序、有效开展,教师须敏锐"洞察"并"权衡"不同课堂表现形式之间的关系,提升教师的教学智慧。
<正>2020年是充满挑战的一年。这一年,突如其来的新冠肺炎疫情,让国家和人民经历了一场严峻大考。在党和国家的坚强领导下,在无数逆行者、守护者的无私奉献和辛苦付出中,我们取得了抗击新冠肺炎疫情的阶段性胜利。在这场"战役"中,教育不曾缺席,每一个教育人也不曾缺席。北京市委教育工委、市教委始终将守护师生生命安全和身体健康放在首位,以坚定的信心和坚强的力量打赢教育系统疫情防控阻击战。
期刊
本文基于“节能减排财政政策综合示范城市”的准自然实验,运用多时点DID和多期多个体DID等方法,实证检验了绿色低碳发展目标下财政政策对企业转型升级的影响。研究结果表明,示范城市试点对企业转型升级有促进作用,表现为生产效率优化、技术绿色创新和产品附加值提升。机制检验发现,示范城市试点通过财政激励的“资源配置效应”和环境规制的“创新补偿效应”改善企业内部融资环境,加快研发创新和数字化转型。进一步研究显
美国印第安裔女作家路易斯·厄德里克(Louise Erdrich)凭借她的第十四部长篇小说《圆屋》(The Round House)获得了2012年度美国国家图书奖小说奖。《圆屋》中充满了哥特式小说的元素和叙述技巧,展现了《诗学》中定义的强奸悲剧,塑造了不同以往的印第安人保留地及印第安人生活方式,呈现了神秘不安中带有恐怖的侦破犯罪行为的过程。在虚构、想象、现实与超现实结合的哥特式技巧中,小说不仅讲
采用实验法测试7名上海某大学的商务汉语学习者的场认知风格,通过观察学习者在课堂环境中的表现探讨二语学习者的场认知风格与课堂表现之间的相关性。研究得出,二语学习者的场认知风格与其课堂表现非直接相关。学习者的国籍、性别、年龄、学习时长和学习态度以及教师的态度和学习内容等都是影响学习者课堂表现的因素。
<正>2021年4月8日,国家发展改革委、商务部印发《关于支持海南自由贸易港建设放宽市场准入若干特别措施的意见》(下称《意见》)明确要求:支持电网企业牵头、组织相关领域企业按照市场化方式组建投资建设运营公司,鼓励创新方式开展各类业务合作,打造全岛“一张网”运营模式。历时一年多,在国家发展改革委政策指导和海南省委、省政府的坚强领导下,
期刊
城轨具有速度快、运量大和绿色环保等优点,目前已成为缓解城市交通拥堵的主要工具。文章以国家“碳达峰”与“碳中和”战略为背景,以城轨绿色低碳发展为目标,针对城轨基础设施运维管理的能耗问题,从数据电子化资产管理、检测结果精准分析与智能决策、检修资源智能化调度 3 个方面设计并开发城市轨道交通基础设施运维管理平台,并在某地铁线路实现落地应用,证明该平台可有效助力运维管理节能降耗,助推国家双碳战略的深入贯彻
<正>北京建筑材料检验研究院股份有限公司多年深耕于建材行业,是国内建筑材料及建筑工程领域极具规模的第三方检验检测、认证评价、监测一体化服务机构,是首批中国绿色产品认证机构、绿色建材产品认证机构,拥有一支300余人的检测认证团队,50余人为具备CCAA注册资格的绿色建材产品认证检查员。检验院将绿色低碳认证评价作为推动行业持续健康发展,实现“碳达峰”“碳中和”的新引擎。截至目前,已颁发近200张绿色认
期刊
随着我国建筑业的高速成长和不断创新,其形式正在向着以先进技术为核心的的企业竞争力不断发展。具有地方标志性的建筑设计不断增多,施工难度以及业主对于工程质量的要求也在逐步提高。在工程建设过程当中,地下室外墙的施工质量作为一个施工过程控制的重难点一直都备受关注,尤其是成型质量、安全性以及场地限制性等方面,都是关注的焦点,尤其是外墙的渗漏风险。现采用一种地下室外墙定型木塑模板单侧支模施工工法,此方法适用于
随着中国国力的增强和国际关系的变化,在华发展的外资企业也面临着种种挑战和新的问题,这对外资企业的公共事务部门从业人员提出了更高的要求。本文结合实践,浅谈如何在新形势下做好政府事务工作,为公司的业务保驾护航。