Text-to-SQL on BIRD (dev)
77.84Execution Accuracy (EA)
MARS-SQL
Updated 1d ago
Evaluation Results
| Method | Links | |||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
2025.11 | 77.84 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 75.88 | - | - | - | - | - | - | - | - | - | 80.54 | 70.26 | 64.14 | - | - | - | - | |
2026.05 | 75.3 | - | - | - | - | - | - | - | - | - | 80 | 69.4 | 64.14 | - | - | - | - | |
2025.05 | 74.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 74.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 74.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 74.51 | - | - | - | - | - | - | - | - | - | 79.24 | 68.97 | 62.07 | - | - | - | - | |
2024.11 | 74.46 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 74.46 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 74.32 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 74.32 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 74.32 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 73.53 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 73.34 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 73.34 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 73.34 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 73.34 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 73.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 73.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 73.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 73 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 73 | 73 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 72.43 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 72.43 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 72.29 | - | - | - | - | - | - | - | - | - | 76.65 | 65.52 | 66.21 | - | - | - | - | |
2025.11 | 72.29 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 72.29 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 72.16 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 72.16 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 72.16 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 72.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 72.03 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 71.97 | - | - | - | - | - | - | - | - | - | 76.22 | 67.67 | 58.62 | - | - | - | - | |
2026.03 | 71.9 | - | - | - | - | - | - | - | - | - | 76.43 | 65.09 | 64.83 | - | - | - | - | |
2026.03 | 71.38 | - | - | - | - | - | - | - | - | - | 75.46 | 64.66 | 66.9 | - | - | - | - | |
2026.05 | 71.12 | - | - | - | - | - | - | - | - | - | 76.22 | 64.87 | 59.31 | - | - | - | - | |
2025.11 | 70.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 70.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.12 | 70.28 | 62.63 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 69.53 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 69.4 | 66.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 69.4 | - | - | - | - | - | - | - | - | - | 74.32 | 65.17 | 51.48 | - | - | - | - | |
2024.10 | 69.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 69.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 69.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.11 | 69.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 69.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 69.25 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 69.23 | 73.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 68.77 | - | - | - | - | - | - | - | - | - | 74.05 | 60.34 | 62.07 | - | - | - | - | |
2026.05 | 68.51 | 71.65 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.51 | 71.65 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.32 | 70.77 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 68.31 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 68.31 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 68.31 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 68.12 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 68.12 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 68.12 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.06 | 69.99 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.06 | 70.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.06 | 70.9 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 68.06 | - | - | - | - | - | - | - | - | - | 74.27 | 60.78 | 51.72 | - | - | - | - | |
2024.10 | 67.99 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 67.99 | 70.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 67.92 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 67.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 67.67 | 69.93 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 67.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 67.54 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 67.47 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 67.21 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.11 | 67.21 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 67.21 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.07 | 67.21 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 67.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 67.08 | 69.63 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 67 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 66.88 | 68.27 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 66.82 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 66.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 66.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 66.62 | 69.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 66.56 | 68.13 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 66.43 | - | - | - | - | - | - | - | - | - | 72.54 | 58.41 | 53.1 | - | - | - | - | |
2026.05 | 66.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 66.29 | - | - | - | - | - | - | - | - | - | 73.02 | 64.14 | 48.07 | 73.91 | 66.17 | 51.45 | 67.93 | |
2026.03 | 66.23 | - | - | - | - | - | - | - | - | - | 73.08 | 57.97 | 48.97 | - | - | - | - | |
2026.05 | 66.23 | 70.65 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.03 | 66.1 | - | - | - | - | - | - | - | - | - | 73.19 | 57.76 | 47.59 | - | - | - | - | |
2026.05 | 66.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 65.97 | 68.36 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 65.82 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 65.82 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.12 | 65.78 | 60.62 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.10 | 65.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.02 | 65.59 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2025.05 | 65.58 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2026.05 | 65.58 | 67.97 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - |
Showing 100 of 411 rows