4 个月前

基于神经RST的篇章连贯性评估

基于神经RST的篇章连贯性评估

摘要

本文评估了修辞结构理论(Rhetorical Structure Theory, RST)树和关系在话语连贯性评价中的实用性。研究结果表明,结合银标准 RST 特征可以提高连贯性分类的准确性。我们通过一种树递归神经模型——即 RST-递归模型(RST-Recursive),展示了这一效果,该模型利用了由最先进的 RST 解析器生成的文本 RST 特征。我们在 Grammarly 话语连贯性语料库(Grammarly Corpus for Discourse Coherence, GCDC)上对我们的方法进行了评估,结果显示,当与当前最先进方法结合使用时,我们的方法可以在这一基准测试中达到新的最先进准确率。此外,即使单独部署,RST-递归模型也能实现具有竞争力的准确率,同时参数量减少了 62%。

代码仓库

grig-guz/coherence-rst
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
coherence-evaluation-on-gcdc-rst-accuracyRST-Ensemble
Accuracy: 55.39
coherence-evaluation-on-gcdc-rst-accuracyRST-Recursive
Accuracy: 53.04
coherence-evaluation-on-gcdc-rst-f1RST-Ensemble
Average F1: 46.98
coherence-evaluation-on-gcdc-rst-f1RST-Recursive
Average F1: 44.30

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于神经RST的篇章连贯性评估 | 论文 | HyperAI超神经