【AVoiD-DF】AVoiD-DF: Audio-Visual Joint Learning for Detecting Deepfake

AVoiD-DF: Audio-Visual Joint Learning for Detecting Deepfake

会议/期刊：IEEE TIFS 2023
作者：

code：https://github.com/SYSU-DISG/AVoiD-DF

背景

df引发人们对网络媒体真实性的担忧，之前的deepfake检测工作已经做出许多努力来捕捉模态内伪影。

然而，现实世界场景中的deepfake视频通常由音频和视频的组合组成。

【音频+视频的组合的还有待提升】

如何更有效地发现模态间的不一致性是检测多模态深度伪造和提高模型泛化能力的关键。

【数据集内容的不平衡性】

points

视听联合学习

提出一种用于检测深度伪造的视听联合学习（AVoiD-DF），该学习利用视听不一致性进行多模态伪造检测。

设计一个多