首页 | 官方网站   微博 | 高级检索  
     

一种基于LDA的潜在语义区划分及Web文档聚类算法
引用本文:刘振鹿,王大玲,冯时,张一飞,方东昊.一种基于LDA的潜在语义区划分及Web文档聚类算法[J].中文信息学报,2011,25(1):60-66.
作者姓名:刘振鹿  王大玲  冯时  张一飞  方东昊
作者单位:1. 东北大学 信息科学与工程学院,辽宁 沈阳 110819;
2. 医学影像计算教育部重点实验室(东北大学),辽宁 沈阳 110819
基金项目:国家自然科学基金资助项目(60973019); 国家863计划资助项目(2009AA01Z131)
摘    要:该文应用LDA模型进行文档的潜在语义分析,将语义分布划分成低频、中频、高频语义区,以低频语义区的语义进行Web游离文档检测,以中、高频语义区的语义作为文档特征进行文档聚类,采用文档类别与语义互作用机制对聚类结果进行修正。与相关工作比较,该文不仅应用LDA模型表示文档,而且进行了深入的语义分布区域划分,并将分析结果应用于Web文档聚类。实验表明,该文提出的基于LDA的文档类别与语义互作用聚类算法获得了更好的聚类结果。

关 键 词:LDA  潜在语义  语义分布  文档聚类  

An Approach of Latent Semantic Space Partition and Web Document Clustering
LIU Zhenlu,WANG Daling,FENG Shi,ZHANG Yifei,FANG Donghao.An Approach of Latent Semantic Space Partition and Web Document Clustering[J].Journal of Chinese Information Processing,2011,25(1):60-66.
Authors:LIU Zhenlu  WANG Daling  FENG Shi  ZHANG Yifei  FANG Donghao
Affiliation:1. School of Information Science and Engineering, Northeastern University, Shenyang, Liaoning 110819, China;
2. Key Laboratory of Medical Image Computing, Northeastern University,
Ministry of Education Shenyang, Liaoning 110819, China
Abstract:This paper applies the LDA model to analyze latent semantics of documents and partition the semantic space into low,middle and high frequency space.The semantics in low frequency space are used to detect outlier web documents.The semantics in middle and high frequency space are devoted to document clustering as features of the documents.The quality of clustering results is improved by a mutual-action mechanism between document clusters and semantics.Compared with related work,this paper not only applies LDA...
Keywords:LDA  latent semantic  semantic distribution  document clustering  
本文献已被 CNKI 万方数据 等数据库收录!
点击此处可从《中文信息学报》浏览原始摘要信息
点击此处可从《中文信息学报》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司    京ICP备09084417号-23

京公网安备 11010802026262号