Share your thoughts, 1 month free Claude Pro on usSee more

Diagram Question Answering on AI2D

96.02AI2D Accuracy

ERNIE 5.0-Base

Updated 18d ago

Evaluation Results

Method
ERNIE 5.0-Base 2026.02	96.02	-	-	-	-	-	-	-
Qwen3.5-27B 2026.04	92.9	-	-	-	-	-	-	-
Llama 3.2-11B 2025.01	91.1	-	-	-	-	-	-	-
InternVL3-78B 2025.12	89.7	-	-	-	-	-	-	-
GPT-5-high 2026.06	89.7	-	-	-	-	-	-	-
GPT-5-high 2026.06	89.7	-	-	-	-	-	-	-
MetaForge 2026.06	89.6	-	-	-	-	-	-	-
Keye-VL-1.5-8B 2025.12	89.5	-	-	-	-	-	-	-
Gemini-2.5-Pro 2025.12	89.5	-	-	-	-	-	-	-
GPT-5 2025.12	89.5	-	-	-	-	-	-	-
Qwen3-VL-32B 2025.12	89.5	-	-	-	-	-	-	-
Qwen3-VL-235B-A22B 2026.04	89.2	-	-	-	-	-	-	-
EXAONE 4.5 33B 2026.04	89	-	-	-	-	-	-	-
InternVL3-8B-Masters 2025.12	88.9	-	-	-	-	-	-	-
Masters 2025.12	88.9	-	-	-	-	-	-	-
Qwen3-VL-32B 2026.04	88.9	-	-	-	-	-	-	-
Qwen2.5-VL-72B 2025.12	88.7	-	-	-	-	-	-	-
Qwen2.5-VL-7B-Masters 2025.12	88.6	-	-	-	-	-	-	-
Masters 2025.12	88.6	-	-	-	-	-	-	-
Qwen3-VL-8B-Masters 2025.12	88.5	-	-	-	-	-	-	-
Masters 2025.12	88.5	-	-	-	-	-	-	-
Qwen3-VL-235B 2026.05	88.5	-	-	-	-	-	-	-
Gemini-2.5-Pro 2026.06	88.4	-	-	-	-	-	-	-
Gemini-2.5-Pro 2026.06	88.4	-	-	-	-	-	-	-
GPT-5-Mini 2025.12	88.2	-	-	-	-	-	-	-
GPT-5 mini 2026.04	88.2	-	-	-	-	-	-	-
MetaForge 2026.06	88.15	-	-	-	-	-	-	-
GLM-4.5V 2025.12	88.1	-	-	-	-	-	-	-
Qwen3-VL-4B-Masters 2025.12	88	-	-	-	-	-	-	-
GLM-4.1V-9B 2025.12	87.9	-	-	-	-	-	-	-
InternVL3.5-38B 2025.12	87.8	-	-	-	-	-	-	-
Qwen3-VL-32B 2026.05	87.63	-	-	-	-	-	-	-
VLsI-7B 2024.12	87.3	-	-	-	-	-	-	-
InternVL3.5-8B-Masters 2025.12	87.2	-	-	-	-	-	-	-
Masters 2025.12	87.2	-	-	-	-	-	-	-
InternVL3.5-38B 2026.05	87.05	-	-	-	-	-	-	-
RADIO1D 2026.07	86.9	-	-	-	-	-	-	-
Keye-VL-8B 2025.12	86.7	-	-	-	-	-	-	-
Ovis2-8B 2025.12	86.6	-	-	-	-	-	-	-
F3A 2026.05	86.43	-	-	-	-	-	-	-
SigLIP2-g 2026.07	86.4	-	-	-	-	-	-	-
RADIO1D 2026.07	86.4	-	-	-	-	-	-	-
SigLIP2-SO400m 2026.07	86.2	-	-	-	-	-	-	-
MiniCPM-o2.6-8B 2025.12	86.1	-	-	-	-	-	-	-
C-RADIOv4-H 2026.07	86	-	-	-	-	-	-	-
DivPrune 2026.05	85.96	-	-	-	-	-	-	-
GPT-4.1 2025.12	85.9	-	-	-	-	-	-	-
Qwen2.5-VL-VIF 2026.05	85.78	-	-	-	-	-	-	-
VisionZip 2026.05	85.72	-	-	-	-	-	-	-
Qwen3-VL-8B 2025.12	85.7	-	-	-	-	-	-	-
Ovis2-4B 2025.12	85.7	-	-	-	-	-	-	-
RADIO1D 2026.07	85.7	-	-	-	-	-	-	-
LLaVA-OneVision 2024.09	85.6	-	-	-	-	-	-	-
LLaVA-OneVision-72B 2025.12	85.6	-	-	-	-	-	-	-
TVI-CoT 2026.06	85.6	-	-	-	-	-	-	-
CDPruner 2026.05	85.41	-	-	-	-	-	-	-
Qwen2.5-VL-3B-Masters 2025.12	85.4	-	-	-	-	-	-	-
CoLT 2026.06	85.4	-	-	-	-	-	-	-
PaliGemma2-3B + AuditDM 2025.12	85.3	-	-	-	-	-	-	-
F3A 2026.05	85.22	-	-	-	-	-	-	-
InternVL3-8B 2025.12	85.2	-	-	-	-	-	-	-
NVLM-72B 2025.12	85.2	-	-	-	-	-	-	-
InternVL3-8B 2026.06	85.2	-	-	-	-	-	-	-
InternVL3 2026.06	85.2	-	-	-	-	-	-	-
DivPrune 2026.05	85.13	-	-	-	-	-	-	-
RADIO1D 2026.07	85.1	-	-	-	-	-	-	-
RADIO1D 2026.07	85	-	-	-	-	-	-	-
FastV 2026.05	84.9	-	-	-	-	-	-	-
F3A 2026.05	84.84	-	-	-	-	-	-	-
CDPruner 2026.05	84.72	-	-	-	-	-	-	-
PaliGemma2-28B 2025.12	84.6	-	-	-	-	-	-	-
GPT-4o 2025.12	84.6	-	-	-	-	-	-	-
PaliGemma2-10B 2025.12	84.4	-	-	-	-	-	-	-
Claude-Opus-4.1 2026.06	84.4	-	-	-	-	-	-	-
Claude-Opus-4.1 2026.06	84.4	-	-	-	-	-	-	-
LLaVA-OneVision-1.5-8B 2025.12	84.2	-	-	-	-	-	-	-
Baseline 2026.02	84.2	-	-	-	-	-	-	-
VisionZip 2026.05	84.2	-	-	-	-	-	-	-
LLaVA-OneVision-1.5-8B 2026.06	84.2	-	-	-	-	-	-	-
LLaVA-OneVision-1.5 2026.06	84.2	-	-	-	-	-	-	-
Qwen3-VL-4B 2025.12	84.1	-	-	-	-	-	-	-
Qwen3-VL-4B-Instruct 2026.03	84.1	-	-	-	-	-	-	-
InternVL3.5-8B 2025.12	84	-	-	-	-	-	-	-
RADIO1D 2026.07	84	-	-	-	-	-	-	-
FastV 2026.05	83.92	-	-	-	-	-	-	-
Qwen2.5-VL-7B 2025.12	83.9	-	-	-	-	-	-	-
Vanilla 2026.04	83.9	-	-	-	-	-	-	-
InternVL2-8B 2024.12	83.8	-	-	-	-	-	-	-
Vanilla 2026.06	83.8	-	-	-	-	-	-	-
CDPruner 2026.05	83.74	-	-	-	-	-	-	-
Qwen2.5-VL-SFT 2026.05	83.67	-	-	-	-	-	-	-
LLaVA-OneVision-1.5-4B 2025.12	83.6	-	-	-	-	-	-	-
Qwen3-VL-8B (Baseline) 2026.06	83.6	-	-	-	-	-	-	-
Qwen3-VL (Textual reasoning) 2026.06	83.6	-	-	-	-	-	-	-
MiMo-VL-8B 2025.12	83.5	-	-	-	-	-	-	-
VisionZip 2026.05	83.44	-	-	-	-	-	-	-
F3A 2026.05	83.42	-	-	-	-	-	-	-
Molmo-72B 2025.12	83.4	-	-	-	-	-	-	-
DivPrune 2026.05	83.38	-	-	-	-	-	-	-
FastV 2026.05	83.32	-	-	-	-	-	-	-

Showing 100 of 660 rows