基于潜语义主题加强的跨媒体检索算法

来源：计算机应用杂志2017年第4期北京时间：

作者：黄育, 张鸿

单位：1. 武汉科技大学 计算机科学与技术学院, 武汉 430065;2. 智能信息处理与实时工业系统湖北省重点实验室(武汉科技大学), 武汉 430065

摘要：针对不同模态数据对相同语义主题表达存在差异性，以及传统跨媒体检索算法忽略了不同模态数据能以合作的方式探索数据的内在语义信息等问题，提出了一种新的基于潜语义主题加强的跨媒体检索（LSTR）算法。首先，利用隐狄利克雷分布（LDA）模型构造文本语义空间，然后以词袋（BoW）模型来表达文本对应的图像；其次，使用多分类逻辑回归对图像和文本分类，用得到的基于多分类的后验概率表示文本和图像的潜语义主题；最后，利用文本潜语义主题去正则化图像的潜语义主题，使图像的潜语义主题得到加强，同时使它们之间的语义关联最大化。在Wikipedia数据集上，文本检索图像和图像检索文本的平均查准率为57.0%，比典型相关性分析（CCA）、SM（Semantic Matching）、SCM（Semantic Correlation Matching）算法的平均查准率分别提高了35.1%、34.8%、32.1%。实验结果表明LSTR算法能有效地提高跨媒体检索的平均查准率。

关键词：跨媒体检索,潜语义主题,多分类逻辑回归,后验概率,正则化

基金资助：国家自然科学基金资助项目（61003127，61373109）。