Question Answering on MMLU (Subject-Specific Accuracy)
89.2MMLU Accuracy
ANN
Updated 1mo ago
Evaluation Results
| Method | Links | |||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
2025.06 | 89.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.06 | 88.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.06 | 85.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 71.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 71.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 66.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 61.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 27.26 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 25.49 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 25.42 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 25.35 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 25.31 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 24.87 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | - | 27 | 65.1 | 68.8 | 69.4 | 46 | 47.8 | 49 | 70 | 42.1 | 62.8 | 38.1 | 32.5 | 38.4 | 43 | 32.6 | 68 | 42.2 | 33.8 | 41.2 | - | |
2022.11 | - | 33.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 70 | - | - | - | - | |
2022.11 | - | 21 | 23 | 30.6 | 27.7 | 30 | 21.7 | 17 | 30 | 21 | 36.6 | 25.7 | 29.4 | 28.6 | 33 | 24.4 | 35 | 21.6 | 29.8 | 43.5 | - | |
2022.11 | - | 25 | 25.7 | 28.5 | 29.4 | 19 | 23.2 | 6 | 25 | 23.7 | 32.4 | 27.6 | 26.2 | 25 | 25 | 27 | 36 | 18.6 | 25.2 | 19.4 | - | |
2022.11 | - | 25 | 65.8 | 70.8 | 71.3 | 45 | 47.8 | 49 | 54 | 43 | 60 | 33.6 | 35.7 | 41.1 | 37 | 23.7 | 69 | 34.3 | 33.8 | 50 | - | |
2022.11 | - | 31 | 73 | 79.9 | 80.3 | 51 | 58.1 | 51 | 58 | 38.6 | 62.1 | 41.5 | 33.3 | 41.1 | 32 | 31.9 | 69 | 46.1 | 36.4 | 58.8 | - | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 83.9 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 90.2 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 85.7 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 86.6 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 85.7 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 90.2 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 89.3 | |
2026.05 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 92 |