3 个月前

SemEval-2022 任务4:奉承与居高临下语言检测

SemEval-2022 任务4:奉承与居高临下语言检测

摘要

本文概述了SemEval-2022中Task 4的相关工作,该任务聚焦于识别针对弱势群体的居高临下式与轻蔑式语言(Patronizing and Condescending Language, PCL)。任务包含两个子任务:一是二分类任务,要求参赛者判断给定段落是否包含PCL;二是多标签分类任务,要求参赛者识别出所存在的PCL类型(如存在)。该任务吸引了超过300名参与者,来自77支队伍,共提交了229份有效结果。本文介绍了任务的组织方式,分析了各参赛团队所采用的技术方法,并总结了在PCL检测与分类方面所获得的主要研究洞察。

基准测试

基准方法指标
binary-condescension-detection-on-dpmRoBERTa Baseline
F1-score: 49.1
multi-label-condescension-detection-on-dpmRoBERTa Baseline
Macro-F1: 10.4
semeval-2022-task-4-1-binary-pcl-detection-onRoBERTa Baseline
F1-score: 49.1
semeval-2022-task-4-2-multi-label-pclRoBERTa Baseline
Macro-F1: 10.4

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
SemEval-2022 任务4:奉承与居高临下语言检测 | 论文 | HyperAI超神经