MMLU 全称 Massive Multitask Language Understanding,是一种针对大模型的语言理解能力的测评,是目前最著名的大模型语义理解测评之一,由UC Berkeley大学的研究人员在2020年9月推出。该测试涵盖57项任务,包括初等数学、美国历史、计算机科学、法律等。任务涵盖的知识很广泛,语言是英文,用以评测大模型基本的知识覆盖范围和理解能力。
©️版权声明:若无特殊声明,本站所有文章由老冷AIGC收集整理,未经许可不得转载、抄袭或以其他方式复制发表本站内容。本站所有内容作为学习交流使用,不做商业用途,如有侵权,请联系我们删除,本站拥有最终解析权如果镜像本网站将依法保留追究相关法律责任的权利。