HyperAIHyperAI

Command Palette

Search for a command to run...

通过利用上下文信息提升槽位填充性能

Amir Pouran Ben Veyseh Franck Dernoncourt Thien Huu Nguyen

摘要

槽位填充(Slot Filling, SF)是口语理解(Spoken Language Understanding, SLU)中的一个子任务,旨在从给定的自然语言语句中提取语义成分。该任务通常被建模为序列标注问题。近年来的研究表明,上下文信息对于该任务至关重要。然而,现有模型对上下文信息的利用方式较为局限,例如仅依赖自注意力机制。这类方法难以区分上下文对词向量表示与词标签预测的不同影响。为解决这一问题,本文提出一种新方法,从两个不同层面融合上下文信息:一是表示层面,二是任务特定(即标签)层面。我们在三个基准数据集上进行了大量实验,结果表明所提模型在所有三个数据集上均取得了新的最优性能,显著提升了槽位填充任务的性能表现。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供