3 个月前

$F$,$B$,Alpha Matting

$F$,$B$,Alpha Matting

摘要

剔除图像中的物体并估计其透明度掩码,即图像抠图(image matting),是众多图像编辑应用中的关键任务。深度学习方法通过借鉴分割网络的编码器-解码器架构,在该任务上取得了显著进展。然而,现有大多数网络仅预测透明度图(alpha matte),随后仍需依赖后处理方法来恢复透明区域中的原始前景与背景颜色。尽管最近已有两种方法通过同时估计前景颜色取得了更优结果,但其带来了显著的计算与内存开销。本文提出一种低成本的改进方法,对现有透明度图网络进行优化,使其能够联合预测前景与背景颜色。我们系统研究了多种训练策略,并探索了大量现有及新型损失函数,以支持联合预测任务。实验结果表明,所提方法在Adobe Composition-1k数据集上,在透明度图与合成颜色质量两项指标上均达到当前最优性能,同时也是alphamatting.com在线评测平台上的当前最佳方法。

代码仓库

MarcoForte/FBA-Matting
pytorch
GitHub 中提及
marcoforte/fba_matting
pytorch
GitHub 中提及

基准测试

基准方法指标
image-matting-on-composition-1k-1FBAMatting
Conn: 21.5
Grad: 10.6
MSE: 5.3
SAD: 26.4

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
$F$,$B$,Alpha Matting | 论文 | HyperAI超神经