3 个月前

基于合成数据训练的模型在乌克兰语语法错误修正中的对比研究

基于合成数据训练的模型在乌克兰语语法错误修正中的对比研究

摘要

语法错误修正(Grammatical Error Correction, GEC)任务在英语语言中已得到广泛研究,但其在低资源语言(如乌克兰语)中的应用仍是一个尚未解决的挑战。本文针对乌克兰语构建了序列标注模型与神经机器翻译模型,并设计了一套算法化纠错规则以增强上述系统。此外,我们还开发了适用于乌克兰语的合成数据生成技术,以生成高质量、类人化的语法错误。最终,我们确定了最优的合成数据组合方式,用于扩充现有的UA-GEC语料库,在新建立的UA-GEC基准测试上取得了0.663的F0.5得分,达到当前最先进水平。相关代码与训练好的模型将公开发布于GitHub与HuggingFace平台。

基准测试

基准方法指标
grammatical-error-correction-on-ua-gecmBART-based model with synthetic data
F0.5: 68.17

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于合成数据训练的模型在乌克兰语语法错误修正中的对比研究 | 论文 | HyperAI超神经