“模型”MetAI 联合多所大学推出基准数据集,测试大语言模型因果推理能力

2023-06-12 17:05:23来源:PingWest品玩

今天,很高兴为大家分享来自PingWest品玩的MetAI 联合多所大学推出基准数据集,测试大语言模型因果推理能力,如果您对MetAI 联合多所大学推出基准数据集,测试大语言模型因果推理能力感兴趣,请往下看。

品玩6月12日讯,据 huggingface 页面显示,Meta AI 近日联合香港大学以及密歇根大学发布了一款基础数据集,用来测试大语言模型的因果推理能力。

这款数据集收录了超过40万个样本,并制定了一个名为 Corr2cause 的新任务。它通过一组相关语句来确定变量之间的因果关系。研发团队目前已经通过该数据集评估了17款现有的大模型产品。

通过实验,团队评估现有的 17 个大型语言模型没有一个在这项纯粹的因果推理任务上表现良好。

好了,关于MetAI 联合多所大学推出基准数据集,测试大语言模型因果推理能力就讲到这。


返回科技金融网首页 >>

版权及免责声明:凡本网所属版权作品,转载时须获得授权并注明来源“科技金融网”,违者本网将保留追究其相关法律责任的权力。凡转载文章,不代表本网观点和立场,如有侵权,请联系我们删除。


相关文章