基于BERT和LightGBM的文本关键词提取方法

来源 :电子科技 | 被引量 : 0次 | 上传用户:atmywb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
传统的文本关键词提取方法忽略了上下文语义信息,不能解决一词多义问题,提取效果并不理想。基于LDA和BERT模型,文中提出LDA-BERT-LightGBM(LB-LightGBM)模型。该方法选择LDA主题模型获得每个评论的主题及其词分布,根据阈值筛选出候选关键词,将筛选出来的词和原评论文本拼接在一起输入到BERT模型中,进行词向量训练,得到包含文本主题词向量,将文本关键词提取问题通过LightGBM算法转化为二分类问题。通过实验对比textrank算法、LDA算法、LightGBM算法及文中提出的LB-LightGBM模型对文本关键词提取的准确率P、召回率R以及F1,结果表明当TopN取3至6时,F1的平均值比最优方法提升3.5%,该方法的抽取效果整体上均优于实验中所选取对比方法,能够更准确地发现文本关键词。
其他文献
大众生活节奏的加快以及互联网技术的发展,推动着各种新媒介的产生与迭代。借助今日头条所拥有的海量数据平台,以及受众兴趣导向的推送,抖音短视频APP快速地将广大用户聚集起来形成流量,借此自发行后便迅速登上APP Store热门软件前10名。自2018年初以来,众多机构媒体也纷纷开通抖音号,以丰富自己的全媒体矩阵,传播效果各有不同。媒体打破传统“两微一端”的新媒体老路,入驻抖音,充分发挥短视频内容传播力
目的 分析小儿静脉滴注阿奇霉素的药物不良反应表现,并总结相关的临床护理措施。方法 本研究行分组对照试验,将2018年1月至2019年10月于医院进行静脉滴注阿奇霉素治疗的42例患儿应用抽签法则分为观察组和对照组,每组21例。观察组行针对性护理干预,对照组行常规护理干预,分别计算两组相关数据统计结果,并做统计学比较。结果 观察组出现阿奇霉素不良反应1例,不良反应发生率为4.76%,对照组出现阿奇霉素
精确地短期负荷预测为电力系统经济调度和机组最优负荷分配交易奠定基础。因此,提出了一种将变分模态分解(variational mode decomposition, VMD)和长短期记忆神经网络(long short-term memory, LSTM)结合的短期负荷预测模型,并使用支持向量回归(support vector regression, SVR)构建修正后的误差序列对初始预测序列补偿。首
目的 观察肠外营养治疗对非小细胞肺癌(NSCLC)术后行吉西他滨联合奈达铂化疗患者的临床效果影响。方法 用前瞻性研究方法,选取2017年7月至2019年10月的258例经微创手术切除且术后行规范化疗的非小细胞肺癌(NSCLC)患者为研究对象,分为治疗组63例,对照组195例。对照组仅行常规肠内营养支持,治疗组在对照组基础上加用肠外营养支持,比较两组化疗后营养状况、免疫功能、肺功能及不良反应发生率情
非洲猪瘟是一种急性、接触性传染病,本病的传播速度快,病程较短,死亡率高。患病猪主要表现为体温升高,皮肤发绀,淋巴结、肾脏和胃肠道黏膜有明显的出血。本文介绍了非洲猪瘟的病原学、流行特点、临床症状、诊断方法以及预防措施,意在为防控非洲猪瘟提供理论依据。
<正>从企业人才战略发展着眼,聚焦一线工程项目的10个关键岗位,极力推行“五一〇”人才工程,从岗位能力标准出发,将员工教育培训工作与人才培养选拔互联互动,畅通员工职业晋升发展路径,建立一项系统性的“选、用、育、留”人才培养和管理机制。1教育与培训既有区别又相互成就教育与培训既有区别,又相互成就,教育是培训的基础。在企业中没有督学机制,但在教育中有,人才开发方面,企业教育培训和人力资源部
期刊
针对现有方法存在的忽略语义信息及重复提取语义相近关键词等问题,提出了一种基于Bidirectional encoderrepresentationfromtransformers(BERT)模型的无监督中文单文本关键词提取模型。该模型首先对待提取文本进行预处理以选取候选词,接着使用BERT模型的隐藏层结合全文信息获取候选词的词向量,然后加入聚类层筛除语义重复的候选词,最后获取全文语义向量并计算候选
金属有机多孔材料(MOFs)由于其结构的多样性、可调的孔结构、高比表面积和孔体积、优异的热稳定性等独特的性质被广泛应用于分离催化以及医药等领域。本文采用超临界二氧化碳(sc-CO2)为单一溶剂,通过反应结晶技术首次快速高效地合成了沸石咪唑酯骨架ZIF-67材料,避免了有机溶剂的使用,对于开发绿色高效的MOFs材料合成新工艺具有重要意义。首先,以乙酰丙酮钴(Co(Acac)2)和2-甲基咪唑(Hmi
<正>酒精生产所用发酵池,必须耐酸的腐蚀。一般白酒厂大多采用砖体构造、瓷板贴面或环氧树脂塗壁。但瓷板造价较高,环氧树脂则不耐用,易剥落;而用水玻璃耐酸水泥砂浆抹池壁既经济实惠,又切实可行,效果很好。不过有个别使用的厂,据说使用时间不长即发生脱
期刊
随着市场经济的发展,现代企业的竞争日趋激烈。人才是第一资源。企业要想获得竞争优势,招聘人才至关重要。人已经成为企业管理的核心,而对技能、知识、个性趋向、行为、内驱力等内在素质与工作效能之间关系的研究也日益深入,胜任力一词逐渐出现在企业管理领域,并且被管理者所运用,受到学者的研究青睐。基于胜任力模型的人力资源管理越来越受到理论界和实务界的关注。文章以胜任力理论为基础,分析了现代商业社会的人才招聘问题