4 个月前

FlowQA:通过历史对话流提升会话机器理解能力

FlowQA:通过历史对话流提升会话机器理解能力

摘要

对话式机器理解需要对会话历史(如之前的问答对)、文档上下文以及当前问题进行理解。为了使传统的单轮模型能够全面编码会话历史,我们引入了一种称为Flow的机制,该机制通过交替并行处理结构,可以整合在回答先前问题过程中生成的中间表示。与将之前的问答对作为输入进行拼接的方法相比,Flow能够更深入地融合会话历史的潜在语义。我们的模型FlowQA在两个最近提出的对话挑战中表现出色(CoQA上的F1分数提高了7.2%,QuAC上的F1分数提高了4.0%)。Flow的有效性也在其他任务中得到了体现。通过将顺序指令理解简化为对话式机器理解,FlowQA在SCONE的所有三个领域中均超过了最佳模型,准确率提高了1.8%至4.4%。

代码仓库

momohuang/FlowQA
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
question-answering-on-coqaFlowQA (single model)
Out-of-domain: 71.8
Overall: 75.0
question-answering-on-quacFlowQA (single model)
F1: 64.1
HEQD: 5.8
HEQQ: 59.6

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
FlowQA:通过历史对话流提升会话机器理解能力 | 论文 | HyperAI超神经