Multi-task Language Understanding on MMLU (test)
90.46Normalized Accuracy
Oracle
Updated 26d ago
Evaluation Results
| Method | Links | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
2024.08 | 90.46 | 1.75 | - | - | - | - | - | - | - | - | - | |
2026.01 | 81.6 | 105.67 | 1,465 | - | - | - | - | - | - | - | - | |
2026.01 | 77.99 | 61.59 | 852 | - | - | - | - | - | - | - | - | |
2025.10 | 75.2 | - | - | 0.2 | 12.4 | - | - | - | - | - | - | |
2025.10 | 74.8 | - | - | 0.7 | 35 | - | - | - | - | - | - | |
2026.02 | 72.93 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 72.4 | - | - | 0.2 | 15 | - | - | - | - | - | - | |
2026.02 | 70.93 | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 70.5 | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 70.21 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 68.8 | - | - | 0.2 | 12.4 | - | - | - | - | - | - | |
2026.01 | 67.31 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 67.2 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2026.02 | 67.12 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 66.5 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 66.2 | - | - | 0.2 | 12.1 | - | - | - | - | - | - | |
2024.08 | 65.81 | 4.78 | - | - | - | - | - | - | - | - | - | |
2024.08 | 65.75 | 16.4 | - | - | - | - | - | - | - | - | - | |
2024.08 | 65.68 | 4.78 | - | - | - | - | - | - | - | - | - | |
2024.08 | 65.68 | 4.78 | - | - | - | - | - | - | - | - | - | |
2026.02 | 65.52 | - | - | - | - | - | - | - | - | - | - | |
2024.12 | 65.2 | - | - | - | - | - | - | - | - | - | - | |
2024.12 | 64.1 | - | - | - | - | - | - | - | - | - | - | |
2024.12 | 64 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 63.8 | - | - | - | - | - | - | - | - | - | - | |
2024.08 | 63.52 | 2.97 | - | - | - | - | - | - | - | - | - | |
2025.12 | 63.4 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 62.8 | 99.38 | 2,076 | - | - | - | - | - | - | - | - | |
2025.05 | 62.6 | - | - | - | - | - | - | - | - | - | - | |
2024.12 | 62.1 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 61.15 | 73 | 1,676 | - | - | - | - | - | - | - | - | |
2024.08 | 60.92 | 16.4 | - | - | - | - | - | - | - | - | - | |
2025.05 | 60.8 | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 60.8 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 60.5 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 60.5 | - | - | 0.2 | 12.4 | - | - | - | - | - | - | |
2025.10 | 60.4 | - | - | 0.8 | 35 | - | - | - | - | - | - | |
2024.08 | 60.27 | 16.4 | - | - | - | - | - | - | - | - | - | |
2025.12 | 60.2 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 59.98 | 41.91 | 872 | - | - | - | - | - | - | - | - | |
2026.01 | 59.8 | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 59.6 | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 59.6 | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 59.6 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 59.4 | - | - | 0.6 | 35 | - | - | - | - | - | - | |
2025.05 | 59.1 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 59.1 | 28.13 | 643 | - | - | - | - | - | - | - | - | |
2025.10 | 58.7 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2026.05 | 58.6 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 58.5 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 58.5 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2025.10 | 58.3 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2024.08 | 58.2 | 8.27 | - | - | - | - | - | - | - | - | - | |
2026.02 | 57.89 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 57.6 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 57.6 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 57.5 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 57.4 | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 57.3 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 57.3 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 57.2 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 57 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 56.9 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 56.6 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 56.4 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 55.7 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 55 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 55 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2025.10 | 54.5 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2025.12 | 54.2 | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 53.9 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 53.8 | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 53.26 | 12.01 | 276 | - | - | - | - | - | - | - | - | |
2026.06 | 53.2 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 52.9 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 52.7 | - | - | 0.3 | 15 | - | - | - | - | - | - | |
2026.06 | 52.3 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 51.3 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 50.5 | - | - | - | - | - | - | - | - | - | - | |
2025.10 | 48.4 | - | - | 0.1 | 3 | - | - | - | - | - | - | |
2026.06 | 46.95 | - | - | - | - | - | - | - | - | 46.5 | 46.94 | |
2026.01 | 46.38 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 45 | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 45 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 44.63 | - | - | - | - | - | - | - | - | 44.12 | 44.6 | |
2026.06 | 43.05 | - | - | - | - | - | - | - | - | 42.42 | 42.75 | |
2026.01 | 42.5 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 41.69 | - | - | - | - | - | - | - | - | 43.72 | 41.68 | |
2026.01 | 40.23 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 40.12 | - | - | - | - | - | - | - | - | 40.02 | 40.1 | |
2026.01 | 39.5 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 39.21 | - | - | - | - | - | - | - | - | 40.63 | 39.19 | |
2026.01 | 39.1 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 37.89 | - | - | - | - | - | - | - | - | 39.47 | 37.4 | |
2026.06 | 37.64 | - | - | - | - | - | - | - | - | 40.17 | 37.6 | |
2026.01 | 36.5 | - | - | - | - | - | - | - | - | - | - | |
2026.06 | 35.06 | - | - | - | - | - | - | - | - | 36.99 | 35 | |
2026.06 | 34.82 | - | - | - | - | - | - | - | - | 38.54 | 34.78 | |
2026.06 | 33.25 | - | - | - | - | - | - | - | - | 35.41 | 33.01 | |
2026.06 | 30.08 | - | - | - | - | - | - | - | - | 38.7 | 30.02 |
Showing 100 of 188 rows