Long Video Understanding on MLVU (test)
81Average Score
Symphony
Updated 19d ago
Evaluation Results
| Method | Links | |||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
2026.03 | 81 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 76.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 74.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 73.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 65.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 64.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 60.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 59.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 57.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 55.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 54.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 54.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 54.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 54.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 53.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 53.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 53.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 51.7 | 83.5 | 56.4 | 46.7 | 58.4 | 58 | - | 35.7 | 23.3 | - | - | 3.75 | 5.09 | 4.42 | - | |
2026.01 | 50.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 49.5 | 73.9 | 55 | 55.2 | 48.6 | 52.1 | - | 24.3 | 37.4 | - | - | 3.58 | 5.16 | 4.37 | - | |
2025.12 | 49.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 49 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 47.3 | 71.6 | 57 | 53.2 | 45.2 | 48.4 | - | 20.1 | 35.9 | - | - | 2.43 | 5.25 | 3.84 | - | |
2025.12 | 47.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 46.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 46.1 | 75 | 56.5 | 43.9 | 46.4 | 47.7 | - | 28.5 | 24.8 | - | - | 3.05 | 4.92 | 3.99 | - | |
2024.11 | 45.6 | 80.2 | 53.8 | 36.7 | 54.7 | 54 | 38.9 | 42.9 | 16.7 | 32.6 | - | - | - | - | - | |
2025.12 | 45.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 45.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 45.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 45.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 45.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 45.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 44.5 | 74.6 | 51.5 | 42 | 47.4 | 43.8 | - | 22.8 | 29.6 | - | - | 2.57 | 5.04 | 3.81 | - | |
2026.01 | 44.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 44 | 71.8 | 51 | 41.9 | 44.6 | 42.7 | - | 28.2 | 28.1 | - | - | 2.84 | 4.77 | 3.81 | - | |
2026.02 | 43.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 43 | 83.5 | 43.6 | 55 | 32.1 | 46 | 55.6 | 28.6 | 10 | 32.6 | - | - | - | - | - | |
2026.02 | 41.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 41.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 41.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 41.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.12 | 36.4 | 51.9 | 35.5 | 43.1 | 38.9 | 35.8 | - | 25.1 | 24.3 | - | - | 2.12 | 4.8 | 3.46 | - | |
2026.02 | 33.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 33.6 | 76.9 | 38.5 | 28.3 | 34 | 30 | 30.6 | 25.7 | 20 | 18.6 | - | - | - | - | - | |
2025.12 | 33.2 | 50.8 | 34.5 | 30.1 | 32.7 | 32.5 | - | 23.9 | 27.8 | - | - | 3.22 | 5.22 | 4.22 | - | |
2025.12 | 31.3 | 26.9 | 24 | 40.3 | 42 | 29.9 | - | 25.1 | 31.1 | - | - | 2.31 | 5.48 | 3.9 | - | |
2024.11 | 30.7 | 70.3 | 38.5 | 13.3 | 26.4 | 26 | 38.9 | 20 | 21.7 | 20.9 | - | - | - | - | - | |
2025.12 | 30.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 30.1 | 72.5 | 30.8 | 18.3 | 28.3 | 26 | 36.1 | 17.1 | 23.3 | 18.6 | - | - | - | - | - | |
2025.12 | 25.8 | 29.5 | 25 | 24.2 | 24.7 | 25.8 | - | 28.6 | 22.8 | - | - | 2.33 | 3.23 | 2.78 | - | |
2024.11 | 25.3 | 63.7 | 17.9 | 13.3 | 26.4 | 30 | 22.2 | 21.4 | 16.7 | 16.3 | - | - | - | - | - | |
2026.03 | 22 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 20.9 | 17.6 | 17.9 | 28.3 | 32.1 | 22 | 27.8 | 17.1 | 13.3 | 11.6 | - | - | - | - | - | |
2024.11 | 18.9 | 52.7 | 12.8 | 13.3 | 17 | 12 | 19.4 | 15.7 | 8.3 | 18.6 | - | - | - | - | - | |
2024.11 | 18 | 18.7 | 10.3 | 23.3 | 15.1 | 16 | 30.6 | 17.1 | 15 | 16.3 | - | - | - | - | - | |
2026.03 | 18 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 17.2 | 20.9 | 23.1 | 21.7 | 11.3 | 16 | 16.7 | 18.6 | 15 | 11.6 | - | - | - | - | - | |
2026.03 | 17.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 16.6 | 26.4 | 12.8 | 18.3 | 17 | 22 | 11.1 | 15.7 | 11.7 | 14 | - | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 54.9 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 54.9 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 53.8 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 49 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 45.5 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 48 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 52.2 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 55.4 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 51.6 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 58.6 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 50.9 | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | 54.8 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 82.1 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 84.3 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 54.9 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 72.4 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 79.6 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 65.4 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 78.1 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 48.6 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 64.4 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 60.4 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 45.2 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 76.1 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 72.1 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 83.9 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 74.1 | - | - | - | - | |
2025.12 | - | - | - | - | - | - | - | - | - | - | 84.3 | - | - | - | - | |
2026.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 74.6 | |
2026.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 83.8 | |
2026.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 78.2 | |
2026.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 57.1 | |
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 59.4 | ||
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 55.9 | ||
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 56.8 | ||
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 60.3 | ||
2026.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 63 | |
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 64.3 | ||
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 62.3 | ||
| - | - | - | - | - | - | - | - | - | - | - | - | - | - | 61.5 |
Showing 100 of 130 rows