4 个月前

利用跳思向量通过对抗训练生成文本

利用跳思向量通过对抗训练生成文本

摘要

生成对抗网络(GANs)在图像生成和风格迁移任务中表现出色。在语言模型领域,诸如GLoVe和word2vec等词嵌入方法是目前应用神经网络模型处理文本数据的最先进方法。已有研究尝试将GANs与词嵌入结合用于文本生成。本研究提出了一种基于梯度惩罚函数和F值的Skip-Thought句子嵌入与GANs相结合的文本生成方法。该架构旨在通过建模作者所有作品中的句子级表达方式来再现生成文本中的写作风格。研究者在不同的嵌入设置下进行了广泛的实验,涉及条件文本生成和语言生成等多种任务。实验结果表明,该模型在BLEU-n、METEOR和ROUGE等多项自动化评估指标上优于基线文本生成网络。此外,通过人类评分进一步证明了该模型在实际任务中的广泛适用性和有效性。

代码仓库

afrozas/skip-thought-gan
官方
GitHub 中提及

基准测试

基准方法指标
text-generation-on-cmu-seSTWGAN-GP
BLEU-3: 0.617

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
利用跳思向量通过对抗训练生成文本 | 论文 | HyperAI超神经