4 个月前

DeliData:一个多方问题解决中的审议数据集

DeliData:一个多方问题解决中的审议数据集

摘要

群体审议使人们能够协作并解决问题,但由于资源匮乏,这一领域尚未得到充分研究。为此,我们推出了首个公开可用的数据集,其中包含了解决一个已建立的认知任务的协作对话,包括500组对话和14,000条发言。在这些对话中,有64%的小组成员能够找到比他们单独识别出的更好的解决方案;而在最终解决方案正确的小组中,有43.8%的小组没有任何参与者单独正确解决了该任务。此外,我们提出了一种新的注释方案,用于捕捉审议线索,并发布了所有14,000条经此方案注释的发言。最后,我们利用所提出的 数据集开发并评估了两种生成审议发言的方法。数据收集平台、数据集和注释语料库均已在https://delibot.xyz 公开提供。

基准测试

基准方法指标
problem-solving-deliberation-on-delidataConversation + Sol. Tracker
AUC: 0.53
problem-solving-deliberation-on-delidataBag-Of-Annotations + Sol. Tracker
AUC: 0.62
problem-solving-deliberation-on-delidataMajority Class Baseline
AUC: 0.50

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
DeliData:一个多方问题解决中的审议数据集 | 论文 | HyperAI超神经