基于N最短路径和隐马尔科夫模型的中文POI分词系统的研究

来源 :西南大学 | 被引量 : 0次 | 上传用户:cho159753
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
汉语自动分词是中文自然语言处理的一项基础性工作,也是中文信息处理领域的一项基础性课题。本文从理论上分析和比较了目前各种汉语自动分词方法,对各种分词方法的技术特点进行了阐述。本文主要目标是设计并实现一个中文POI自动分词系统,在分析了自动分词面临的主要困难的基础上,设计并实现了一个基于多步处理策略的中文POI自动分词系统。论文首先介绍了汉语自动分词系统通常采用的分词算法和自动分词面临的难点,分析了歧义字段产生的根源以及歧义字段的识别方法。其次搜集、整理和建立了研究所用的自然语言资源。主要包括语料库的搜集,分词词典的建立。论文设计并实现了一个基于多步处理策略的中文POI分词系统。系统包括初切分、歧义字段处理、未登录词识别等功能模块。初切分是找出待切分语句各种可能路径,利用N最短路径的方法;歧义字段处理根据POI自身的特点,利用自定义方法和隐马尔科夫模型相结合的方式处理交集型歧义;未登录词识别的功能是利用规则的方法,对未登录词中的地名等进行分析和处理。最后通过实验验证了系统的性能。同时对全文的工作进行了总结,提出进一步的研究工作。
其他文献
请下载后查看,本文暂不支持在线获取查看简介。 Please download to view, this article does not support online access to view profile.
期刊
不知为什么,我对童年充满了怀念之情,尤其是一想到小时候与外婆在一起生活的那段时光,心中便充满了幸福与美好的感觉。在我看来,幸福加美好的和乘以回忆的积,便是温暖的童年
期刊
请下载后查看,本文暂不支持在线获取查看简介。 Please download to view, this article does not support online access to view profile.
期刊
无障碍设计广泛运用在建筑设计、城市规划、产品设计以及视觉指示设计中,人们在享受优质的产品的同时,无障碍设计思想也在不断变化发展,推陈出新,今天的产品,不是仅仅克服“障碍”
在新形势下干部监督工作面临许多新情况、新问题。这就要求我们必须在坚持和完善过去的一些成功做法的同时,开拓创新,努力探索有利于加强干部选拔任用工作监督的新方法、新手
21世纪综合国力的竞争,不仅是民族素质的竞争、高料技人才的竞争,更是领导集团、领导力量、领导素质的竞争。这就要求高校各级领导班子和领导干部通过“讲学习、讲政治、讲
内蒙古阴山北麓农牧交错带在地形、气候、社会、经济和文化等方面都表现出明显的过渡性,生态环境脆弱易波动,是我国北方重要的地理环境过渡地带和生态屏障。人口剧增和长期不合
小画者的大野心  1980年出生的任晓倩是上海人,她的家境颇为优越,家族里有不少成功的商人,所以大家很盼望家中能出一位艺术家。在任晓倩很小的时候,家人就培养她画画,希望她长大后能成为一名优秀的画家。  但在任晓倩心目中,画家并不是她的终极梦想。因为很多画家都是离群索居、孤傲不羁的,而任晓倩却是一个灵活而热情的人,她喜欢跟人打交道,酷爱沟通,并且相当热心。虽然自小学习油画,但她更喜欢画漫画,因为图文
民主集中制的思想最早始于马克思、恩格斯 ,概念的提出是列宁在 190 5年 12月俄国社会民主工党第一次代表大会上提出的 ,在次年 4月召开的第四次代表大会上 ,把该制度第一次
游客满意度与忠诚度长期以来一直是旅游学界研究的热点,两者已经成为许多旅游管理者和研究者评价旅游市场、旅游资源及旅游产品的重要指标。目的地品牌形象反映了旅游目的地在