基于Transformer的文物图像修复方法

来源：计算机研究与发展杂志2024年第3期北京时间：

作者：王真言,蒋胜丞,宋奇鸿,刘波,毕秀丽,肖斌,

摘要：文物极易因为保存不当而导致部分结构或纹理缺失,而现有的图像修复技术由于受到先验信息和卷积操作的局限而无法直接应用于文物图像修复，为更合理地恢复文物图像原貌，提出了一种新的文物图像修复方法，将文物图像修复工作分为2个步骤：第1步使用Transformer进行粗略的图像重建并恢复连贯的结构；第2步使用卷积神经网络将粗略的重建图像进行上采样并恢复缺失区域的精细纹理.考虑到目前国内外没有高质量的大型文物数据库，因此也提出了一个新的高质量大型文物图像数据库.最终实验结果表明，在符合现实场景的破损修复实验和大面积破损修复实验中，修复效果在主观和客观评估中均优于当前图像修复算法.同时，支持多元化输出，为修复人员提供多样化参考，极大地提升了文物修复效率.

关键词：文物数据库, 文物图像补全, Transformer, 卷积神经网络, 超分辨, 虚拟修复,