分布式词向量研究和实现

来源 :电子制作 | 被引量 : 0次 | 上传用户:bianhaoyi1000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
词向量是词的一种特征表示,是很多自然语言处理任务的基础步骤。本文介绍了一种用深度学习训练词向量的方法,训练好的词向量具有维度低、保留语义相似性的特征。对某个特定语料库训练词向量,用统计语言模型进行中文分词,去掉停用词之后,构造词库;利用CBOW模型在词库上面训练得到词向量。论文学习并且实现了一种分布式词向量表示,主要工作包括:(1)下载清华开源THUNews数据集作为词向量训练数据集;(2)利用开源工具结巴对THUNews中所有文本进行中文分词;(3)利用开源工具FastText实现词向量的训练和评价。
其他文献
提出了一种评价土石坝综合安全度的初步方法,包括土石坝工程安全性及大坝社会经济影响两个方面的研究。在工程安全性方面应用了可靠度分析的方法计算土石坝挡水各项功能的失效
目的观察调经止痛方治疗寒凝血瘀型原发性痛经的临床疗效。方法将80例符合原发性寒凝血瘀型痛经患者采用简单随机抽样分为观察组与对照组各40例。观察组于月经前3d口服中药调
定义了体积分数速度,并由此建立了固-液两相流中的一种湍流模式,模化了动量方程,K方程及ε方程,本模型中,考虑了相间的速度滑移,颗粒间的作用及相间作用,对一管湍流中固-液混合物流动的
古人云:“教之道,德为先。”时至今日,德育工作的重要性也能得到人们的认同,但要真正将德育工作落到实处,做到要育人,育好人,也不是每个学校都已做得很好。现就“多管齐下,畅通育人渠
由于平宝公司首山一矿煤层埋藏深,瓦斯含量、压力大,煤层赋存不稳定,地质构造复杂,地应力大,出现煤与瓦斯突出危险性很大,严重制约着矿井安全生产,直接危及职工的生命安全。钻孔预裂
本文运用单因素分析及非条件logistic回归模型,对我市303例高血压病患者进行了整群配对病因研究。单因素分析筛选出与高血压病有关的危险因素是文化程度、卫生知识、高血压病家族史、盐摄
鲁布革堆石坝设置了一套比较全面的原型监测系统,自1990年建成后一直采用人工观测,结合该坝的实际情况,提出了较完善的监测方案和自动化监测系统方案。自动化系统已于1998年底实施完成,目
企业原生产系统电气控制部分常规元器件触点多,线路复杂,受环境影响较大,触点裸露在空气中,易潮湿、腐蚀,弧光烧坏触电,易产生锈蚀、磨损和金属疲劳,出现问题解决时间长且困
本文对于施工阶段影响比较大的设计变更和现场签证进行了讨论,分别从加强和完善设计变更、提高从业人员素质和建立健全制度作了讨论,得出了一些结论,对投资控制起到一定的作