4 个月前

使用梯度表示增强组合模型以完成知识库

使用梯度表示增强组合模型以完成知识库

摘要

神经模型通常采用图对象的组合表示来处理知识库数据:实体和关系嵌入系统地结合以评估候选知识库条目的真实性。受和谐语法(Harmonic Grammar)启发,我们提出通过优化过程对三元组嵌入进行分词,该过程基于学习到的知识库三元组的良构条件。所得到的模型被称为梯度图(Gradient Graphs),当作为组合模型的辅助时,能够显著提高性能。此外,我们还展示了该模型生成的“超组合”(supracompositional)三元组分词嵌入具有可解释性特征,这些特征在对生成的三元组表示进行推理时证明是有帮助的。

基准测试

基准方法指标
knowledge-graphs-on-fb15kHHolE
MRR: .796
link-prediction-on-fb15kHHolE
Hits@1: .727
Hits@10: .901
Hits@3: .848
MR: 21
MRR: .796
link-prediction-on-fb15k-1HHolE
Hits@1: 0.727
Hits@10: 0.901
Hits@3: 0.848
MR: 21
MRR: 0.796
link-prediction-on-wn18HHolE
Hits@1: .931
Hits@10: .951
Hits@3: .945
MR: 183
MRR: .939

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
使用梯度表示增强组合模型以完成知识库 | 论文 | HyperAI超神经