4 个月前

将释义纳入神经词汇意义消歧

将释义纳入神经词汇意义消歧

摘要

词义消歧(WSD)旨在识别多义词在特定上下文中的正确含义。诸如WordNet之类的词汇资源已被证明对基于知识的方法进行WSD非常有帮助。然而,以往用于WSD的神经网络通常依赖大量标注数据(上下文),而忽略了词汇资源如释义(词义定义)。本文中,我们将目标词的上下文和释义整合到一个统一框架中,以充分利用标注数据和词汇知识。因此,我们提出了GAS:一种增强释义的WSD神经网络,该网络联合编码目标词的上下文和释义。GAS在一个改进的记忆网络框架中建模上下文与释义之间的语义关系,从而打破了以往监督方法和基于知识方法之间的壁垒。我们进一步通过WordNet中的语义关系扩展了词义的原始释义,以丰富释义信息。实验结果表明,我们的模型在多个英语全词语WSD数据集上优于现有的最先进系统。

代码仓库

jimiyulu/WSD_MemNN
官方
tf
GitHub 中提及

基准测试

基准方法指标
word-sense-disambiguation-on-semeval-2013GASext (Concatenation)
F1: 67.2
word-sense-disambiguation-on-semeval-2013GAS (Concatenation)
F1: 67.0
word-sense-disambiguation-on-semeval-2013GASext (Linear)
F1: 67.1
word-sense-disambiguation-on-semeval-2013GAS (Linear)
F1: 66.7
word-sense-disambiguation-on-semeval-2015GAS (Concatenation)
F1: 71.8
word-sense-disambiguation-on-semeval-2015GASext (Concatenation)
F1: 72.6
word-sense-disambiguation-on-semeval-2015GAS (Linear)
F1: 71.6
word-sense-disambiguation-on-semeval-2015GASext (Linear)
F1: 72.1
word-sense-disambiguation-on-senseval-2GAS (Linear)
F1: 72.0
word-sense-disambiguation-on-senseval-2GASext (Linear)
F1: 72.4
word-sense-disambiguation-on-senseval-2GASext (Concatenation)
F1: 72.2
word-sense-disambiguation-on-senseval-2GAS (Concatenation)
F1: 72.1
word-sense-disambiguation-on-senseval-3-taskGASext (Concatenation)
F1: 70.5
word-sense-disambiguation-on-senseval-3-taskGAS (Linear)
F1: 70.0
word-sense-disambiguation-on-senseval-3-taskGAS (Concatenation)
F1: 70.2
word-sense-disambiguation-on-senseval-3-taskGASext (Linear)
F1: 70.1
word-sense-disambiguation-on-supervisedGAS<sub>ext</sub>
SemEval 2007: --*
SemEval 2013: 67.2
SemEval 2015: 72.6
Senseval 2: 72.2
Senseval 3: 70.5
word-sense-disambiguation-on-supervisedGAS
SemEval 2007: --*
SemEval 2013: 66.7
SemEval 2015: 71.6
Senseval 2: 72.0
Senseval 3: 70.0

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供