HyperAIHyperAI

Command Palette

Search for a command to run...

基于似然的生成模型在输入复杂性分析与分布外检测中的应用

Joan Serrà David Álvarez Vicenç Gómez Olga Slizovskaia José F. Núñez Jordi Luque

摘要

基于似然的生成模型是检测分布外(Out-of-Distribution, OOD)输入的一种有前景的工具,这类输入可能威胁机器学习系统的鲁棒性或可靠性。然而,已有研究表明,此类模型所计算的似然值在识别与训练数据显著不同的输入时存在局限性。本文提出,这一问题的根源在于输入复杂度对生成模型似然值产生了过度影响。我们通过一系列实验验证了该假设,并引入输入复杂度的估计量,构建了一种高效且无需参数调优的OOD检测评分方法。该评分可被视为一种似然比,类似于贝叶斯模型比较中的形式。实验结果表明,在多种数据集、模型架构、模型规模及复杂度估计方式下,该方法的性能与现有OOD检测方法相当,甚至更为优越。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于似然的生成模型在输入复杂性分析与分布外检测中的应用 | 论文 | HyperAI超神经