《计算机工程杂志》发表论文赏析

基于多通道注意力机制的人脸替换鉴别

来源:计算机工程杂志2022年第2期北京时间:

作者:武茜, 贾世杰

单位:大连交通大学 电气信息工程学院, 辽宁 大连 116028

摘要:基于深度学习的人脸替换技术取得快速发展,但由DeepFake自动生成的人脸替换图片有可能危害人们的隐私安全。针对DeepFake图片鉴别问题,建立一种基于多通道注意力机制的深度学习鉴别网络模型。将Xception网络作为基础特征提取器,在多通道注意力模块中通过矩阵相乘的思想融合全局和局部的注意力表示,以减少重要信息损失。设计损失函数时添加中心损失,从而提高特征区分度。在训练过程中利用注意力图来引导训练图像的裁剪和去除,以达到数据增强的目的。实验结果表明,相比Xception、B4Att方法,在FaceForensics++数据集上该网络模型对DeepFake的检测精度分别提高0.77和0.45个百分点,在Celeb-DF数据集上分别提高5.30和4.68个百分点。

关键词:人脸替换,多通道注意力机制,图片鉴别,Xception网络,深度学习

基金资助:辽宁省教育厅科学研究项目(JDL2019006)。

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!