4 个月前

参数化散射网络

参数化散射网络

摘要

小波散射变换生成了几何不变量和变形稳定性。在多个信号域中,它已被证明相比其他非学习表示方法能产生更具区分性的表示,并且在某些任务中,特别是在有限标签数据和高度结构化信号的情况下,其性能优于学习表示方法。散射变换中使用的小波滤波器通常通过参数化的母小波来构建紧框架。在这项研究中,我们探讨了这种标准的小波滤波器构造是否最优。以Morlet小波为例,我们提出学习滤波器的尺度、方向和纵横比,以生成特定问题的散射变换参数化。我们展示了,在小样本分类场景下,我们的学习版本的散射变换相比标准散射变换显著提高了性能。此外,我们的实证结果表明,传统的滤波器组构造可能并不是散射变换提取有效表示所必需的。

代码仓库

bentherien/ParametricScatteringNetworks
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
small-data-image-classification-on-cifar-10LearnableScatteringNetwork+WRN
Accuracy (%): 63.13
small-data-image-classification-on-cifar-10FixedScatteringNetwork+WRN
Accuracy (%): 61.66
small-data-image-classification-on-cifar-10WRN
Accuracy (%): 62.97
small-data-image-classification-on-cifar-10-2LearnableScatteringNetwork+WRN
Accuracy (%): 43.6
small-data-image-classification-on-cifar-10-2WRN
Accuracy (%): 38.78
small-data-image-classification-on-cifar-10-2FixedScatteringNetwork+WRN
Accuracy (%): 43.16
small-data-image-classification-on-cifar-10-3FixedScatteringNetwork+WRN
Accuracy (%): 68.16
small-data-image-classification-on-cifar-10-3LearnableScatteringNetwork+WRN
Accuracy (%): 70.14
small-data-image-classification-on-cifar-10-3WRN
Accuracy (%): 71.37

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
参数化散射网络 | 论文 | HyperAI超神经