Multi-task Language Understanding on MMLU (test)
90.46Normalized Accuracy
Oracle
Updated 4d ago
Evaluation Results
| Method | Links | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
2024.08 | 90.46 | 1.75 | - | - | - | - | - | - | - | |
2026.01 | 81.6 | 105.67 | 1,465 | - | - | - | - | - | - | |
2026.01 | 77.99 | 61.59 | 852 | - | - | - | - | - | - | |
2025.10 | 75.2 | - | - | 0.2 | 12.4 | - | - | - | - | |
2025.10 | 74.8 | - | - | 0.7 | 35 | - | - | - | - | |
2026.02 | 72.93 | - | - | - | - | - | - | - | - | |
2025.10 | 72.4 | - | - | 0.2 | 15 | - | - | - | - | |
2026.02 | 70.93 | - | - | - | - | - | - | - | - | |
2026.02 | 70.5 | - | - | - | - | - | - | - | - | |
2026.02 | 70.21 | - | - | - | - | - | - | - | - | |
2025.10 | 68.8 | - | - | 0.2 | 12.4 | - | - | - | - | |
2026.01 | 67.31 | - | - | - | - | - | - | - | - | |
2025.10 | 67.2 | - | - | 0.3 | 15 | - | - | - | - | |
2026.02 | 67.12 | - | - | - | - | - | - | - | - | |
2025.12 | 66.5 | - | - | - | - | - | - | - | - | |
2025.10 | 66.2 | - | - | 0.2 | 12.1 | - | - | - | - | |
2024.08 | 65.81 | 4.78 | - | - | - | - | - | - | - | |
2024.08 | 65.75 | 16.4 | - | - | - | - | - | - | - | |
2024.08 | 65.68 | 4.78 | - | - | - | - | - | - | - | |
2024.08 | 65.68 | 4.78 | - | - | - | - | - | - | - | |
2026.02 | 65.52 | - | - | - | - | - | - | - | - | |
2024.12 | 65.2 | - | - | - | - | - | - | - | - | |
2024.12 | 64.1 | - | - | - | - | - | - | - | - | |
2024.12 | 64 | - | - | - | - | - | - | - | - | |
2026.01 | 63.8 | - | - | - | - | - | - | - | - | |
2024.08 | 63.52 | 2.97 | - | - | - | - | - | - | - | |
2025.12 | 63.4 | - | - | - | - | - | - | - | - | |
2026.01 | 62.8 | 99.38 | 2,076 | - | - | - | - | - | - | |
2025.05 | 62.6 | - | - | - | - | - | - | - | - | |
2024.12 | 62.1 | - | - | - | - | - | - | - | - | |
2026.01 | 61.15 | 73 | 1,676 | - | - | - | - | - | - | |
2024.08 | 60.92 | 16.4 | - | - | - | - | - | - | - | |
2025.05 | 60.8 | - | - | - | - | - | - | - | - | |
2025.05 | 60.8 | - | - | - | - | - | - | - | - | |
2026.01 | 60.5 | - | - | - | - | - | - | - | - | |
2025.10 | 60.5 | - | - | 0.2 | 12.4 | - | - | - | - | |
2025.10 | 60.4 | - | - | 0.8 | 35 | - | - | - | - | |
2024.08 | 60.27 | 16.4 | - | - | - | - | - | - | - | |
2025.12 | 60.2 | - | - | - | - | - | - | - | - | |
2026.01 | 59.98 | 41.91 | 872 | - | - | - | - | - | - | |
2026.01 | 59.8 | - | - | - | - | - | - | - | - | |
2025.05 | 59.6 | - | - | - | - | - | - | - | - | |
2025.05 | 59.6 | - | - | - | - | - | - | - | - | |
2025.05 | 59.6 | - | - | - | - | - | - | - | - | |
2025.10 | 59.4 | - | - | 0.6 | 35 | - | - | - | - | |
2025.05 | 59.1 | - | - | - | - | - | - | - | - | |
2026.01 | 59.1 | 28.13 | 643 | - | - | - | - | - | - | |
2025.10 | 58.7 | - | - | 0.3 | 15 | - | - | - | - | |
2026.05 | 58.6 | - | - | - | - | - | - | - | - | |
2025.12 | 58.5 | - | - | - | - | - | - | - | - | |
2025.10 | 58.5 | - | - | 0.3 | 15 | - | - | - | - | |
2025.10 | 58.3 | - | - | 0.3 | 15 | - | - | - | - | |
2024.08 | 58.2 | 8.27 | - | - | - | - | - | - | - | |
2026.02 | 57.89 | - | - | - | - | - | - | - | - | |
2026.05 | 57.6 | - | - | - | - | - | - | - | - | |
2026.05 | 57.6 | - | - | - | - | - | - | - | - | |
2025.12 | 57.5 | - | - | - | - | - | - | - | - | |
2026.05 | 57.4 | - | - | - | - | - | - | - | - | |
2025.05 | 57.3 | - | - | - | - | - | - | - | - | |
2026.05 | 57.3 | - | - | - | - | - | - | - | - | |
2025.12 | 57.2 | - | - | - | - | - | - | - | - | |
2026.05 | 57 | - | - | - | - | - | - | - | - | |
2026.05 | 56.9 | - | - | - | - | - | - | - | - | |
2026.05 | 56.6 | - | - | - | - | - | - | - | - | |
2026.05 | 56.4 | - | - | - | - | - | - | - | - | |
2026.05 | 55.7 | - | - | - | - | - | - | - | - | |
2025.12 | 55 | - | - | - | - | - | - | - | - | |
2025.10 | 55 | - | - | 0.3 | 15 | - | - | - | - | |
2025.10 | 54.5 | - | - | 0.3 | 15 | - | - | - | - | |
2025.12 | 54.2 | - | - | - | - | - | - | - | - | |
2026.05 | 53.9 | - | - | - | - | - | - | - | - | |
2025.12 | 53.8 | - | - | - | - | - | - | - | - | |
2026.01 | 53.26 | 12.01 | 276 | - | - | - | - | - | - | |
2025.10 | 52.7 | - | - | 0.3 | 15 | - | - | - | - | |
2025.12 | 50.5 | - | - | - | - | - | - | - | - | |
2025.10 | 48.4 | - | - | 0.1 | 3 | - | - | - | - | |
2026.01 | 46.38 | - | - | - | - | - | - | - | - | |
2025.12 | 45 | - | - | - | - | - | - | - | - | |
2025.12 | 45 | - | - | - | - | - | - | - | - | |
2026.01 | 42.5 | - | - | - | - | - | - | - | - | |
2026.01 | 40.23 | - | - | - | - | - | - | - | - | |
2026.01 | 39.5 | - | - | - | - | - | - | - | - | |
2026.01 | 39.1 | - | - | - | - | - | - | - | - | |
2026.01 | 36.5 | - | - | - | - | - | - | - | - | |
2026.01 | 25.12 | - | - | - | - | - | - | - | - | |
2026.02 | 23.96 | - | - | - | - | - | - | - | - | |
2026.01 | 14.2 | - | - | - | - | - | - | - | - | |
2026.02 | - | - | - | - | - | 26.5 | - | - | - | |
2026.02 | - | - | - | - | - | 27 | - | - | - | |
2026.02 | - | - | - | - | - | 28.8 | - | - | - | |
2026.02 | - | - | - | - | - | 28.2 | - | - | - | |
2026.02 | - | - | - | - | - | 29.5 | - | - | - | |
2026.02 | - | - | - | - | - | 31.8 | - | - | - | |
2026.02 | - | - | - | - | - | 32.4 | - | - | - | |
2026.02 | - | - | - | - | - | 40.2 | - | - | - | |
2026.02 | - | - | - | - | - | 40.8 | - | - | - | |
2026.02 | - | - | - | - | - | 42.5 | - | - | - | |
2026.02 | - | - | - | - | - | 41.5 | - | - | - | |
2026.02 | - | - | - | - | - | 43.1 | - | - | - | |
2026.02 | - | - | - | - | - | 45.2 | - | - | - |
Showing 100 of 168 rows