HELM全称Holistic Evaluation of Language Models（语言模型整体评估）是由斯坦福大学推出的大模型评测体系，该评测方法主要包括场景、适配、指标三个模块，每次评测的运行都需要指定一个场景，一个适配模型的提示，以及一个或多个指标。它评测主要覆盖的是英语，有7个指标，包括准确率、不确定性/校准、鲁棒性、公平性、偏差、毒性、推断效率；任务包括问答、信息检索、摘要、文本分类等。
©️版权声明：若无特殊声明，本站所有文章由老冷AIGC收集整理，未经许可不得转载、抄袭或以其他方式复制发表本站内容。本站所有内容作为学习交流使用，不做商业用途，如有侵权，请联系我们删除，本站拥有最终解析权如果镜像本网站将依法保留追究相关法律责任的权利。
类似网站
老冷AIGC--高级UI设计师必备网站，收录了国内外数百个不同类型的AI智能工具，每日更新和添加最新AI工具，老冷AIGC-高级UI设计师必备网站还推荐了AI学习开发的常用网站、框架和模型，帮助你加入人工智能浪潮，自动化高效完成任务！
Ctrl + D 或 ⌘ + D 收藏本站到浏览器书签栏。
豫ICP备2020033325号-4