4 个月前

OmniSR:直接和间接光照下的阴影去除

OmniSR:直接和间接光照下的阴影去除

摘要

阴影可以由直接光照和间接光照中的遮挡产生。尽管当前大多数阴影去除研究集中在由直接光照引起的阴影上,但间接光照产生的阴影同样普遍存在,尤其是在室内场景中。从间接光照中去除阴影的一个重要挑战是获取无阴影图像以训练阴影去除网络。为了解决这一挑战,我们提出了一种新颖的渲染管道,用于在直接和间接光照下生成有阴影和无阴影的图像,并创建了一个包含超过30,000对图像的综合合成数据集,涵盖了各种物体类型和照明条件。我们还提出了一种创新的阴影去除网络,该网络通过连接(concatenation)和注意力机制(attention mechanisms)显式地整合了语义和几何先验。实验结果表明,我们的方法优于现有的最先进阴影去除技术,并且能够在不同照明条件下有效泛化到室内和室外场景,从而提高了阴影去除方法的整体效果和适用性。

代码仓库

BlackJoke76/OmniSR
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
image-shadow-removal-on-ins-datasetOmniSR
Average PSNR (dB): 30.38
shadow-removal-on-ins-datasetOmniSR
Average PSNR (dB): 30.38

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
OmniSR:直接和间接光照下的阴影去除 | 论文 | HyperAI超神经