论文部分内容阅读
近年来,随着Internet技术的发展和信息传播手段的进步,人们可以从互联网上得到的信息越来越丰富,尤其可以获得数目惊人的文本文档。如何对这些文档进行有效的导航、总结、组织,以方便人们有效管理和检索海量的文本资源,已经成为计算机科学和信息科学急需解决的问题之一。随着文本聚类技术研究的深入和广泛的应用,基于关键词的经典文本向量空间的高稀疏性,文本中的同义词、近义词和多义词问题,在很大程度上影响了文本聚类算法的效率和聚类的效果。本体理论的应用成为解决这一问题的很好的途径。起源于哲学的本体论技术是人工智能领域中的一种先进的知识表示技术,它通过概念和概念间的关系,反映事物或现象的抽象本质,并建立抽象模型。近年来受到信息领域的广泛关注,被广泛地用于许多领域如语义网、搜索引擎、电子商务、自然语言处理、知识工程、信息提取、多Agent系统、数据库设计和数字图书馆等等。本文对中文文本聚类技术进行了探讨,提出了一种新的基于HowNet(知网)本体库的中文文本聚类方法。在文中,利用HowNet作为背景知识,对同义词、多义词进行处理,将单纯的词映射到概念,然后采用Chameleon(变色龙)聚类算法,将这些概念进行聚类,最终完成文本聚类。该算法采用了一种不断进行聚类,以达到最终完成文本聚类的思想。用概念代替单个词条表示文本,减少了文本特征之间的依赖关系,有效的降低了文本聚类的时间复杂度。