Share your thoughts, 1 month free Claude Pro on usSee more

Text-to-SQL on Spider-DK

81.9Execution Accuracy (EX)

FineStep

Updated 1mo ago

Evaluation Results

Method
FineStep 2026.05	81.9	-	-	-	-	-	-	-
FineStep-4B 2026.05	81.5	-	-	-	-	-	-	-
FineStep 2026.05	81.5	-	-	-	-	-	-	-
Arctic-Text2SQL-R1 2025.11	81.5	-	-	-	-	-	-	-
KE-RL 2026.05	80.97	-	-	-	-	-	-	-
GRPO 2026.05	80.7	-	-	-	-	-	-	-
GIGPO 2026.05	80.4	-	-	-	-	-	-	-
SENSE-13B 2026.05	80.2	-	-	-	-	-	-	-
ReEx-SQL-7B 2026.05	80.2	-	-	-	-	-	-	-
GSPO 2026.05	80.2	-	-	-	-	-	-	-
FineStep-8B 2026.05	80	-	-	-	-	-	-	-
FineStep 2026.05	80	-	-	-	-	-	-	-
EXPO-SQL 2026.04	79.9	-	-	-	-	-	-	-
DAPO 2026.05	79.6	-	-	-	-	-	-	-
DAPO 2026.05	79.4	-	-	-	-	-	-	-
GIGPO 2026.05	79.1	-	-	-	-	-	-	-
GSPO 2026.05	78.9	-	-	-	-	-	-	-
SQL-o1 + Llama3-8B 2026.05	78.7	-	-	-	-	-	-	-
GRPO 2026.05	78.7	-	-	-	-	-	-	-
GRPO 2026.05	78.7	-	-	-	-	-	-	-
MARS-SQL 2025.11	78.13	-	-	-	-	-	-	-
MARS-SQL 2025.11	78.13	-	-	-	-	-	-	-
SQL-R1-7B* 2026.05	78.1	-	-	-	-	-	-	-
SQL-R1 2026.04	78.1	-	-	-	-	-	-	-
SENSE-7B 2026.04	77.9	-	-	-	-	-	-	-
Think2SQL-14B 2025.04	77.8	-	-	-	-	-	-	-
OmniSQL-7B 2026.04	77.8	-	-	-	-	-	-	-
OmniSQL-32B 2026.05	77.6	-	-	-	-	-	-	-
Qwen2.5-72B-Instruct 2025.05	77.6	-	-	-	-	-	-	-
KE-RL 2026.05	76.58	-	-	-	-	-	-	-
Omni 2026.05	76.52	-	-	-	-	-	-	-
Progress-SQL-14B 2026.06	76.4	-	-	-	-	-	-	-
Qwen2.5-72B-Instruct 2025.05	76.4	-	-	-	-	-	-	-
MTIR-SQL + Qwen3-14B 2026.05	76.3	-	-	-	-	-	-	-
OmniSQL-7B 2026.01	76.1	-	-	-	-	-	-	61.4
OmniSQL 2025.11	76.1	-	-	-	-	-	-	-
OmniSQL 2026.06	76.1	-	-	-	-	-	-	-
Think2SQL-4B 2025.04	76	-	-	-	-	-	-	-
Think2SQL-8B 2025.04	75.9	-	-	-	-	-	-	-
Progress-SQL-7B 2026.06	75.9	-	-	-	-	-	-	-
SQL-Trail-7B 2026.06	75.4	-	-	-	-	-	-	-
KE-ICL 2026.05	75.32	-	-	-	-	-	-	-
No-Train 2026.05	75.3	-	-	-	-	-	-	-
Share 2025.11	75.3	-	-	-	-	-	-	-
No-Train 2026.05	75	-	-	-	-	-	-	-
ROUTE + Llama3-8B 2026.05	74.6	-	-	-	-	-	-	-
OmniSQL-7B 2026.06	74.6	-	-	-	-	-	-	-
ACE-SQL 2026.06	74.4	-	-	-	-	-	-	-
EVOLSQL-7B 2026.01	74.2	-	-	-	-	-	-	61.9
CodeS 2026.05	74.2	-	-	-	-	-	-	-
KE-ICL 2026.05	74.02	-	-	-	-	-	-	-
SQL-GEN 2026.05	73.9	-	-	-	-	-	-	-
DeepSeek-V3 (671B MoE) 2025.05	73.8	-	-	-	-	-	-	-
No-Train 2026.05	73.6	-	-	-	-	-	-	-
Qwen2.5-Coder-7B-Instruct 2025.05	73.6	-	-	-	-	-	-	-
GPT-4o 2025.05	73.5	-	-	-	-	-	-	-
Reasoning-SQL* 2026.05	73.3	-	-	-	-	-	-	-
Reasoning-SQL-7B 2026.06	73.3	-	-	-	-	-	-	-
Reasoning-SQL 2026.04	73.3	-	-	-	-	-	-	-
Reward-SQL + Qwen3-8B 2025.05	73.1	-	-	-	-	-	-	-
Reasoning SQL 2025.11	73.03	-	-	-	-	-	-	-
DAIL-SQL 2026.05	73.02	-	-	-	-	-	-	-
TA-SQL + GPT-4 2026.05	72.9	-	-	-	-	-	-	-
GPT-4o 2025.11	72.9	-	-	-	-	-	-	-
MTIR-SQL 2026.06	72.9	-	-	-	-	-	-	-
GPT-4o 2025.05	72.9	-	-	-	-	-	-	-
DeepSeek-V3 (671B MoE) 2025.05	72.9	-	-	-	-	-	-	-
Omni 2026.05	72.47	-	-	-	-	-	-	-
ASTRES 2025.05	72.3	59.1	-	-	-	-	-	-
FastRAText+GPT-4 2026.05	72.3	-	-	-	-	-	-	-
Qwen2.5-Coder-14B-Instruct 2026.06	72.3	-	-	-	-	-	-	-
GPT-4-Turbo 2025.05	72.3	-	-	-	-	-	-	-
GPT-4-Turbo 2025.05	72.1	-	-	-	-	-	-	-
ACT-SQL 2025.05	72	47.7	-	-	-	-	-	-
CodeS 2025.11	72	-	-	-	-	-	-	-
SFT CodeS-7B 2026.06	72	-	-	-	-	-	-	-
SkyRL-SQL-7B 2026.06	72	-	-	-	-	-	-	-
Arctic-SQL + Qwen2.5-7B 2025.05	71.8	-	-	-	-	-	-	-
GPT-O3-mini 2025.11	71.77	-	-	-	-	-	-	-
O3-mini 2025.11	71.77	-	-	-	-	-	-	-
DCG-SQL 2025.05	71.6	66.5	-	-	-	-	-	-
MAC-SQL 2026.04	71.4	-	-	-	-	-	-	-
CodeS 2026.05	71.29	-	-	-	-	-	-	-
SFT CodeS-15B 2026.05	70.7	-	-	-	-	-	-	-
ASTRES 2025.05	70.5	46.4	-	-	-	-	-	-
SQL-R1 + Qwen2.5-7B 2025.05	70.5	-	-	-	-	-	-	-
DAIL-SQL 2026.05	70.43	-	-	-	-	-	-	-
SQL-GEN 2026.05	70.3	-	-	-	-	-	-	-
SQL-R1-7B 2026.06	69.9	-	-	-	-	-	-	-
Meta-Llama-3.1-8B-Instruct 2025.05	69.9	-	-	-	-	-	-	-
Arctic-SQL + Qwen2.5-7B 2025.05	69.7	-	-	-	-	-	-	-
ACT-SQL 2025.05	69.5	47.5	-	-	-	-	-	-
Reward-SQL + Qwen3-8B 2025.05	69.4	-	-	-	-	-	-	-
DCG-SQL 2025.05	69	59.4	-	-	-	-	-	-
ASTRES 2025.05	68.8	49.3	-	-	-	-	-	-
Qwen3-coder 2025.11	68.79	-	-	-	-	-	-	-
CYCLESQL + GPT-4 2026.05	68.5	-	-	-	-	-	-	-
KE-ICL 2026.05	68.41	-	-	-	-	-	-	-
DCG-SQL 2025.05	68.4	62.8	-	-	-	-	-	-
ACT-SQL 2025.05	68.2	45.4	-	-	-	-	-	-

Showing 100 of 183 rows