4 个月前

数字图像的法医相似性

数字图像的法医相似性

摘要

本文介绍了一种新的数字图像取证方法,称为取证相似性(forensic similarity),该方法用于判断两个图像块是否包含相同的取证痕迹或不同的取证痕迹。这种方法的一个优点是,在未来对某一取证痕迹进行相似性决策时,无需事先具备该痕迹的知识,例如训练样本。为此,我们提出了一种由基于卷积神经网络(CNN)的特征提取器和三层神经网络组成的两部分深度学习系统,后者被称为相似性网络(similarity network)。该系统将图像块对映射到一个分数,指示它们是否包含相同的或不同的取证痕迹。我们评估了该系统在确定两个图像块是否1)由同一相机模型或不同相机模型拍摄;2)经过相同编辑操作或不同编辑操作处理;以及3)在给定特定编辑操作的情况下,是否使用相同的或不同的操纵参数进行处理的准确性。实验结果表明,该方法适用于多种取证痕迹,并且重要的是,在未用于训练系统的“未知”取证痕迹上也显示出有效性。此外,实验还表明所提出的系统显著优于现有技术,错误率降低了超过一半。进一步地,我们在两个实际应用中展示了取证相似性方法的实用性:伪造检测与定位以及数据库一致性验证。

基准测试

基准方法指标
image-manipulation-detection-on-casia-osnForSim
AUC: 0.537
F-score: 0.157
Intersection over Union: 0.094
image-manipulation-detection-on-casia-osn-1ForSim
AUC: 0.532
Intersection over Union: 0.153
f-Score: 0.091
image-manipulation-detection-on-casia-osn-2ForSim
AUC: 0.525
Intersection over Union: 0.091
f-Score: 0.151
image-manipulation-detection-on-casia-osn-3ForSim
AUC: 0.542
Intersection over Union: 0.100
f-Score: 0.165
image-manipulation-detection-on-columbia-osnForSim
AUC: 0.607
Intersection over Union: 0.304
f-Score: 0.450
image-manipulation-detection-on-columbia-osn-1ForSim
AUC: 0.650
Intersection over Union: 0.354
f-Score: 0.496
image-manipulation-detection-on-columbia-osn-2ForSim
AUC: 0.595
Intersection over Union: 0.294
f-Score: 0.436
image-manipulation-detection-on-columbia-osn-3ForSim
AUC: 0.610
Intersection over Union: 0.312
f-Score: 0.453
image-manipulation-detection-on-dso-osnForSim
AUC: 0.689
Intersection over Union: 0.238
f-Score: 0.356
image-manipulation-detection-on-dso-osn-1ForSim
AUC: 0.564
Intersection over Union: 0.147
f-Score: 0.247
image-manipulation-detection-on-dso-osn-2ForSim
AUC: 0.542
Intersection over Union: 0.139
f-Score: 0.233
image-manipulation-detection-on-dso-osn-3ForSim
AUC: 0.568
Intersection over Union: 0.165
f-Score: 0.260
image-manipulation-detection-on-nist-osnForSim
AUC: 0.580
Intersection over Union: 0.085
f-Score: 0.140
image-manipulation-detection-on-nist-osn-1ForSim
AUC: 0.581
Intersection over Union: 0.082
f-Score: 0.136
image-manipulation-detection-on-nist-osn-2ForSim
AUC: 0.586
Intersection over Union: 0.082
f-Score: 0.137
image-manipulation-detection-on-nist-osn-3ForSim
AUC: 0.581
Intersection over Union: 0.094
f-Score: 0.150

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
数字图像的法医相似性 | 论文 | HyperAI超神经