3 个月前

比谎言更快:基于二值神经网络的实时深度伪造检测

比谎言更快:基于二值神经网络的实时深度伪造检测

摘要

深度伪造检测旨在遏制由深度生成媒体引发的在线内容信任危机。尽管现有方法多依赖于大型复杂模型,但实时检测需求对模型效率提出了更高要求。为此,与以往研究不同,本文提出一种基于二值化神经网络(Binary Neural Networks, BNNs)的新型图像深度伪造检测方法,可在保持极小精度损失的前提下实现快速推理。此外,本方法引入快速傅里叶变换(Fast Fourier Transform, FFT)和局部二值模式(Local Binary Pattern, LBP)作为额外通道特征,以在频域与纹理域中有效挖掘伪造痕迹。在COCOFake、DFFD和CIFAKE等多个数据集上的实验结果表明,该方法在多数场景下达到当前最优性能,且推理阶段的浮点运算量(FLOPs)最高可降低20倍,显著提升了计算效率。通过探索BNN在深度伪造检测中的应用,实现了准确率与效率之间的良好平衡,为未来高效深度伪造检测研究提供了新的方向与技术路径。

代码仓库

fedeloper/binary_deepfake_detection
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
deepfake-detection-on-cifake-real-and-aiFasterThanLies
AUC: 99.65
Validation Accuracy: 97.29
deepfake-detection-on-cocofakeFasterThanLies
AUC: 0.9986
Accuracy: 99.25
deepfake-detection-on-dffdFasterThanLies
AUC: 0.9994
Accuracy: 0.9895

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
比谎言更快:基于二值神经网络的实时深度伪造检测 | 论文 | HyperAI超神经