针对文本挖掘和信息检索中的文本或文献聚类与分类等问题,学术界基于VSM(向量空间模型)主要有两方面的研究:一是文献表示模型;二是算法。然而,传统的算法对高维稀疏的向量聚类存在不足,一些新的算法也不尽完美,更主要的是聚类算法的效果与数据本身的特征以及信息提取和表示密切相关,特别是在信息有限的情况下,聚类算法的优势也不能得到完美发挥。相比之下,信息的挖掘、提取和文献向量表示就尤为重要。如果只有关键词,文献的表示向量相比一般文本表示就表现得更加稀疏。面对这种情形,聚类算法即使是“巧妇”也“难为无米之炊”,因此,牛奉高著的《数字文献资源高维聚合模型研究》的重点突破是文献主题语义信息的提取、度量和文献高维向量的表示方法。
基于以上问题和现象,本书以数字文献资源为对象,本着在信息资源聚合中减少对背景知识的依赖,便于推广应用的宗旨,提出了基于文献集本身或者相关领域的共现信息而实现文献聚合的共现潜在语义向量空间模型,而且通过实验证实基于CLSVSM的文献聚类表现比基于VSM和GVSM(广义向量空间模型)显著地好。
本书还讨论了模型的性质以及通过数学和统计方法降低算法复杂度、提高聚类效率的多种思路,为模型在信息检索和搜索领域的广泛应用提供了一般范式。
展开