4 个月前

WikiGraphs:一个维基文本-知识图谱配对数据集

WikiGraphs:一个维基文本-知识图谱配对数据集

摘要

我们介绍了一个新的数据集,其中每篇维基百科文章都与一个知识图谱配对,以促进条件文本生成、图生成和图表示学习的研究。现有的图-文配对数据集通常包含较小的图和较短的文本(1个或几个句子),这限制了在这些数据上可以学习到的模型的能力。我们的新数据集WikiGraphs通过将来自已建立的WikiText-103基准测试(Merity等人,2016年)的每篇维基百科文章与Freebase知识图谱(Bollacker等人,2008年)中的一个子图配对而收集。这使得与其他最先进的文本生成模型进行基准测试变得容易,这些模型能够生成连贯的长段落文本。与先前的图-文配对数据集相比,本数据集中的图和文本数据规模显著更大。我们在该数据集上展示了三种任务的基本线模型结果:从图到文本生成、从图到文本检索以及从文本到图检索。我们表明,更好的基于图的条件设置可以提高生成和检索的质量,但仍有很大的改进空间。

基准测试

基准方法指标
kg-to-text-generation-on-wikigraphsGNN
Test perplexity: 26.93
rBLEU (Test): 26.22
rBLEU (Valid): 31.39
rBLEU(w/title)(Test): 28.35
rBLEU(w/title)(Valid): 32.65
kg-to-text-generation-on-wikigraphsUnconditional
Test perplexity: 25.85
rBLEU (Test): 9.98
rBLEU (Valid): 10.97
rBLEU(w/title)(Test): 24.07
rBLEU(w/title)(Valid): 27.98
kg-to-text-generation-on-wikigraphsBoW
Test perplexity: 26.65
rBLEU (Test): 24.41
rBLEU (Valid): 29.53
rBLEU(w/title)(Test): 27.39
rBLEU(w/title)(Valid): 32.41
kg-to-text-generation-on-wikigraphsNodes
Test perplexity: 27.4
rBLEU (Test): 25.31
rBLEU (Valid): 30.51
rBLEU(w/title)(Test): 27.43
rBLEU(w/title)(Valid): 32.60

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
WikiGraphs:一个维基文本-知识图谱配对数据集 | 论文 | HyperAI超神经