
摘要
远程监督(Distant Supervision)能够自动为关系抽取任务生成大量训练样本,但同时也带来了两个主要问题:标签噪声和训练数据不平衡。以往的研究更多关注于减少错误标注的关系(即假阳性),而较少探讨由于知识库不完整所导致的关系缺失问题(即假阴性)。此外,在以往的问题设定中,负样本的数量远远超过正样本。本文首先对负样本所引发的上述挑战进行了全面分析;随后,将关系抽取问题重新建模为正样本-未标注样本学习(Positive Unlabeled Learning)任务,以缓解假阴性问题;第三,提出一种名为 \textsc{ReRe} 的流水线方法,该方法先进行句子级关系检测,再进行主体/客体抽取,从而实现高效的样本利用。实验结果表明,所提出的方法在各项指标上均显著优于现有方法,即使在大量假阳性样本的干扰下,仍能保持优异的性能。
代码仓库
redreamality/RERE-relation-extraction
官方
tf
GitHub 中提及
基准测试
| 基准 | 方法 | 指标 |
|---|---|---|
| relation-extraction-on-nyt10-hrl | HRL Takanobu et al. (2019) | F1: 64.4 |
| relation-extraction-on-nyt10-hrl | ReRe | F1: 73.95 |
| relation-extraction-on-nyt10-hrl | ReRe (exact) | F1: 73.4 |
| relation-extraction-on-nyt10-hrl | TPLinker Wang et al. (2020)* | F1: 72.45 |
| relation-extraction-on-nyt10-hrl | CasRel (exact) | F1: 70.11 |
| relation-extraction-on-nyt10-hrl | TPLinker Wang et al. (2020)*(exact) | F1: 71.93 |
| relation-extraction-on-nyt11-hrl | HRL | F1: 53.8 |
| relation-extraction-on-nyt11-hrl | ReRe (exact) | F1: 55.47 |
| relation-extraction-on-nyt11-hrl | RERE | F1: 56.23 |
| relation-extraction-on-nyt21 | CasRel (exact) | F1: 54.78 |
| relation-extraction-on-nyt21 | ReRe (exact) | F1: 58.88 |
| relation-extraction-on-nyt21 | TPLinker(exact) | F1: 57.33 |
| relation-extraction-on-nyt21 | ReRe | F1: 59.62 |
| relation-extraction-on-ske | CasRel (exact) | F1: 86.45 |
| relation-extraction-on-ske | ReRe (exact) | F1: 87.21 |
| relation-extraction-on-ske | TPLinker (exact) | F1: 84.32 |