4 个月前

TADAM:任务依赖的自适应度量以改进少样本学习

TADAM:任务依赖的自适应度量以改进少样本学习

摘要

少样本学习已成为从少量示例中生成泛化模型的关键技术。在本研究中,我们发现度量缩放和度量任务条件化对于提高少样本算法的性能至关重要。我们的分析表明,简单的度量缩放完全改变了少样本算法参数更新的本质。对于某些度量,在mini-Imagenet 5分类5样本任务上,度量缩放可将准确率提升高达14%。此外,我们提出了一种简单而有效的方法,使学习器能够在任务样本集上进行条件化,从而学习到依赖于任务的度量空间。我们还提出并实证测试了一种基于辅助任务协同训练的端到端优化程序,以学习依赖于任务的度量空间。基于任务依赖的缩放度量所构建的少样本学习模型在mini-Imagenet上达到了最先进的水平。我们在本文中引入了另一个基于CIFAR100的少样本数据集,并在该数据集上验证了这些结果。我们的代码已公开发布在https://github.com/ElementAI/TADAM。

代码仓库

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
TADAM:任务依赖的自适应度量以改进少样本学习 | 论文 | HyperAI超神经