一种融合生成对抗网络的零样本图像分类方法

来源：计算机技术与发展杂志2022年第07期北京时间：

作者：刘帅;黄刚;戴晓峰;颜金花

单位：1. 南京邮电大学 计算机学院,江苏 南京 210023;2. 南京工业大学 计算机科学与技术学院,江苏 南京 211816

摘要：目前, 很多零样本图像分类方法是采用学习语义信息空间和图像特征空间之间的映射关系来实现图像分类, 但是这些方法会产生枢纽化和域漂移问题。 通过利用生成对抗网络实现图像特征生成可以缓解以上两种问题,但该方法容易产生模式崩溃从而导致生成的图像特征不真实。 因此提出一种改进的生成对抗网络方法,通过在生成器网络上增加一个重构网络,将生成器生成的图像特征重构回语义信息,以此实现生成器网络生成的图像特征更加符合语义信息的图像特征。 实验结果表明,该方法相较于原本的生成对抗网络模型而言,在 AWA、CUB、FLO、SUN 四个数据集上的分类准确率分别提升了 1. 0、0. 1、1. 2 和 0. 9 个百分点,证明了通过融合改进的生成对抗网络实现零样本图像分类方法的有效性和可行性。

关键词：零样本学习;生成对抗网络;语义信息;图像特征生成;信息重构