4 个月前

潜在预测网络用于代码生成

潜在预测网络用于代码生成

摘要

许多语言生成任务需要根据结构化和非结构化输入生成文本。本文介绍了一种新型神经网络架构,该架构可以根据任意数量的输入函数生成输出序列。重要的是,我们的方法允许对条件上下文的选择以及生成的粒度(例如字符或标记)进行边缘化处理,从而实现可扩展且有效的训练。利用这一框架,我们解决了从混合自然语言和结构化规范生成编程代码的问题。为此,我们创建了两个新的数据集,分别来源于可收集交易卡牌游戏《万智牌》(Magic the Gathering)和《炉石传说》(Hearthstone)。在这些数据集以及第三个已有的语料库上,我们证明了通过边缘化多个预测器可以使我们的模型超越强大的基准模型。

代码仓库

deepmind/card2code
官方
GitHub 中提及
davidgolub/QuestionGeneration
pytorch
GitHub 中提及

基准测试

基准方法指标
code-generation-on-djangolpn (Ling et al., 2016)
Accuracy: 62.3
BLEU Score: 77.6
code-generation-on-djangoPhrasal Statistical MT (Ling et al., 2016)
Accuracy: 31.5
BLEU Score: 47.6

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
潜在预测网络用于代码生成 | 论文 | HyperAI超神经