历史专项测试
历史数据存档。查看近期模型,请返回模型能力评测。
知识与推理 · MMLU-Pro
记录保留原模型配置与数据提供方;计算机知识分项衡量知识,不是代码项目完成率。
262 条 · 按总正确率降序缺测记为 —
| 模型/配置 | 总正确率 | 数据提供方 |
|---|---|---|
| 80.8% | Self-Reported | |
| 80.5% | Self-Reported | |
| 80.3% | Self-Reported | |
| 80.1% | Self-Reported | |
| 80.1% | Self-Reported | |
| 79.9% | Self-Reported | |
| 79.4% | Self-Reported | |
| 79.1% | Self-Reported | |
| 79.1% | Self-Reported | |
| 79.0% | Self-Reported | |
| 78.9% | Self-Reported | |
| 78.5% | Self-Reported | |
| 78.4% | Self-Reported | |
| 78.3% | Self-Reported | |
| 78.1% | Self-Reported | |
| 78.0% | Self-Reported | |
| 77.9% | Self-Reported | |
| 77.6% | TIGER-LAb | |
| 77.6% | Self-Reported | |
| 76.2% | TIGER-Lab |
Claude-3.5-Sonnet (2024-10-22)
关闭详情数据提供方:TIGER-LAb · 参数规模:未披露/来源未提供
- 总正确率
- 77.6%
- 数学
- 81.0%
- 计算机知识
- 82.4%
- 物理
- 77.3%
- 化学
- 78.5%
- 生物
- 88.6%
- 工程
- 61.3%
- 经济
- 85.9%
- 商业
- 81.4%
- 健康
- 76.9%
- 心理
- 84.6%
- 法律
- 64.6%
- 历史
- 73.8%
- 哲学
- 76.8%
- 其他
- 80.2%
来源、版本与使用范围
数据版本:4623b7c68d2276218d487464b0608dc978f4b301
来源许可证:Apache-2.0。模型自身许可证与成绩文件许可证分别核对。本页未运行模型评测;不同来源或配置记录不合并,价格未提供。
固定版本数据文件