导语： Hugging Face推出的开源大模型排行榜单,
Open LLM Leaderboard 是最大的大模型和数据集社区 HuggingFace 推出的开源大模型排行榜单，基于 Eleuther AI Language Model Evaluation Harness（Eleuther AI语言模型评估框架、封装。
由于社区在发布了大量的大型语言模型（LLM、和聊天机器人之后，往往伴随着对其性能的夸大宣传，很难过滤出开源社区取得的真正进展以及目前的最先进模型。因此，Hugging Face 使用 Eleuther AI语言模型评估框架对模型进行四个关键基准测试评估。这是一个统一的框架，用于在大量不同的评估任务上测试生成式语言模型。
Open LLM Leaderboard 的评估基准
- AI2 推理挑战（25-shot、：一组小学科学问题
- HellaSwag（10-shot、：一个测试常识推理的任务，对人类来说很容易（大约95%、，但对SOTA模型来说具有挑战性。
- MMLU（5-shot、- 用于测量文本模型的多任务准确性。测试涵盖57个任务，包括基本数学、美国历史、计算机科学、法律等等。
- TruthfulQA（0-shot、- 用于测量模型复制在在线常见虚假信息中的倾向性。
收录说明：
1、本网页并非 Open LLM Leaderboard 官网网址页面，此页面内容编录于互联网，只作展示之用；2、如果有与 Open LLM Leaderboard 相关业务事宜，请访问其网站并获取联系方式；3、本站与 Open LLM Leaderboard 无任何关系，对于 Open LLM Leaderboard 网站中的信息，请用户谨慎辨识其真伪。4、本站收录 Open LLM Leaderboard 时，此站内容访问正常，如遇跳转非法网站，有可能此网站被非法入侵或者已更换新网址，导致旧网址被非法使用,5、如果你是网站站长或者负责人，不想被收录请邮件删除：i-hu#Foxmail.com （#换@）
前往AI网址导航
1、本文来自 AIGC网址导航 投稿的内容 Open LLM Leaderboard ，所有言论和图片纯属作者个人意见，版权归原作者所有；不代表 本站 立场；
2、本站所有文章、图片、资源等如果未标明原创，均为收集自互联网公开资源；分享的图片、资源、视频等，出镜模特均为成年女性正常写真内容，版权归原作者所有，仅作为个人学习、研究以及欣赏！如有涉及下载请24小时内删除；
3、如果您发现本站上有侵犯您的权益的作品，请与我们取得联系，我们会及时修改、删除并致以最深的歉意。邮箱： i-hu#（#换@）foxmail.com
2、本站所有文章、图片、资源等如果未标明原创，均为收集自互联网公开资源；分享的图片、资源、视频等，出镜模特均为成年女性正常写真内容，版权归原作者所有，仅作为个人学习、研究以及欣赏！如有涉及下载请24小时内删除；
3、如果您发现本站上有侵犯您的权益的作品，请与我们取得联系，我们会及时修改、删除并致以最深的歉意。邮箱： i-hu#（#换@）foxmail.com
