3 个月前

SPLADE-v3:SPLADE 的新基线

SPLADE-v3:SPLADE 的新基线

摘要

作为最新版SPLADE库发布的重要配套内容,本文介绍了训练结构的改进,并推出了最新的SPLADE系列模型——SPLADE-v3。我们将其与BM25、SPLADE++以及重排序器(re-rankers)进行了对比,并通过覆盖40多个查询集的元分析(meta-analysis)展示了其卓越的性能表现。SPLADE-v3进一步拓展了SPLADE模型的性能边界:在统计上显著优于BM25和SPLADE++,同时在性能上可与交叉编码器(cross-encoder)重排序器相媲美。具体而言,SPLADE-v3在MS MARCO开发集上的MRR@10指标超过40,且在BEIR基准测试的跨域任务上实现了2%的性能提升。

代码仓库

基准测试

基准方法指标
passage-retrieval-on-peerqaSPLADEv3
MRR: 0.4536
Recall@10: 0.6851

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
SPLADE-v3:SPLADE 的新基线 | 论文 | HyperAI超神经