Multi-image Reasoning on MuirBench
77.2Accuracy
L2-VMAS
Updated 18d ago
Evaluation Results
| Method | Links | ||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
2026.01 | 77.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 75.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 73 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 71.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 71 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 68 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 68 | 44.51 | 56.12 | 51.28 | 49.15 | 88.69 | 60.29 | 56 | 86.85 | 23.44 | 71.51 | 36.9 | 80.14 | - | |
2026.01 | 67.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 67.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 64.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 64.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 62.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.09 | 62.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.09 | 60.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 58.2 | 54.88 | 50 | 64.1 | 60.68 | 68.34 | 57.35 | 50 | 59.05 | 50 | 66.13 | 48.81 | 50 | - | |
2025.09 | 58.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 57.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 57.88 | - | - | - | - | - | - | - | - | - | - | - | - | 1.07 | |
2026.01 | 57.81 | 54.27 | 50 | 58.97 | 55.13 | 65.83 | 52.65 | 50 | 63.58 | 50 | 74.19 | 46.43 | 50 | - | |
2026.03 | 56.81 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 56.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 56.38 | - | - | - | - | - | - | - | - | - | - | - | - | 0.82 | |
2026.01 | 55.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 55.56 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 51.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 51.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 51.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 49.35 | 35.98 | 41.33 | 47.44 | 28.63 | 64.82 | 45.29 | 48 | 66.59 | 12.5 | 59.14 | 28.57 | 43.84 | - | |
2025.11 | 45.54 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 44.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 44.77 | 39.63 | 46.94 | 44.87 | 42.74 | 52.26 | 44.12 | 27 | 55.17 | 12.5 | 67.74 | 30.95 | 24.32 | - | |
2026.01 | 44.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 44.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 44.5 | 33.54 | 48.47 | 38.46 | 38.46 | 67.59 | 28.82 | 26 | 53.88 | 18.75 | 56.99 | 26.19 | 35.62 | - | |
2025.11 | 44.42 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 44.42 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 44.42 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 43 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 41.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 41.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 39.88 | 38.41 | 49.49 | 42.31 | 40.6 | 39.7 | 31.76 | 26 | 51.51 | 12.5 | 68.28 | 32.14 | 19.18 | - | |
2026.01 | 39.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 37.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 37.58 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 37.58 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 34 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 33.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 33.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
| 32.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | ||
| 32.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | ||
2026.01 | 31.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 31.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 27.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 27.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 26.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 26.08 | 26.22 | 17.86 | 39.74 | 21.79 | 25.38 | 27.65 | 21 | 24.78 | 15.62 | 56.45 | 26.19 | 17.12 | - | |
2026.01 | 24.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 23.46 | 27.44 | 22.96 | 24.36 | 23.08 | 25.13 | 20 | 20 | 23.49 | 23.44 | 34.95 | 14.29 | 19.86 | - | |
2026.01 | 22.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.01 | 20.85 | 26.22 | 16.33 | 41.03 | 14.1 | 19.6 | 19.71 | 13 | 21.34 | 12.5 | 41.4 | 16.67 | 15.75 | - | |
2026.01 | 20 | - | - | - | - | - | - | - | - | - | - | - | - | - |