Share your thoughts, 1 month free Claude Pro on usSee more

Visual Question Answering on A-OKVQA

92.68Acc

Cont-Squeeze (128 -> 1)

Updated 23d ago

Evaluation Results

Method
Cont-Squeeze (128 -> 1) 2026.02	92.68	-	-	-	-	-	-	-	-	-	-	-	-
Cont-Squeeze (128 -> 1) 2026.02	92.44	-	-	-	-	-	-	-	-	-	-	-	-
Cont-Squeeze (128 -> 1) 2026.02	92.37	-	-	-	-	-	-	-	-	-	-	-	-
In-Squeeze (128 ... -> 1) 2026.02	92	-	-	-	-	-	-	-	-	-	-	-	-
Direct Fine-tuning (r=1) 2026.02	91.94	-	-	-	-	-	-	-	-	-	-	-	-
In-Squeeze (128 ... -> 1) 2026.02	91.7	-	-	-	-	-	-	-	-	-	-	-	-
Direct Fine-tuning (r=1) 2026.02	91.33	-	-	-	-	-	-	-	-	-	-	-	-
Direct Fine-tuning (r=1) 2026.02	91.27	-	-	-	-	-	-	-	-	-	-	-	-
Base 2026.07	90	-	-	-	-	-	-	-	-	-	4.24	4.14	-
ReShift 2026.07	90	-	-	-	-	-	-	-	-	0.97	4.31	4.09	2
Gemma 3 4B IT 2026.02	89	-	-	-	-	-	-	-	-	-	-	-	-
OpenVLThinker-7B 2026.05	88.73	-	-	-	-	-	-	-	-	-	-	-	-
WeThink-7B 2026.05	88.65	-	-	-	-	-	-	-	-	-	-	-	-
Qwen3-VL-8B 2026.05	87.86	-	-	-	-	-	-	-	-	-	-	-	-
Qwen2.5-VL-7B 2026.05	87.6	-	-	-	-	-	-	-	-	-	-	-	-
ALEAHallu 2025.12	87.24	-	-	-	-	-	-	-	-	-	-	-	-
Vanilla 2026.02	87.2	-	-	-	-	100	-	-	-	-	-	-	-
IVC-Prune 2026.02	87.2	-	-	-	-	100	-	-	-	-	-	-	-
ReShift 2026.07	87	-	-	-	-	-	-	-	-	0.97	4.03	4.01	0
PDrop 2026.02	86.9	-	-	-	-	99.1	-	-	-	-	-	-	-
Vanilla 2026.02	86.9	-	-	-	-	100	-	-	-	-	-	-	-
Qwen2.5-VL-7B 2026.05	86.81	-	-	-	-	-	-	-	-	-	-	-	-
GThinker-7B 2026.05	86.72	-	-	-	-	-	-	-	-	-	-	-	-
OneThinker-8B 2026.05	86.72	-	-	-	-	-	-	-	-	-	-	-	-
IVC-Prune 2026.02	86.7	-	-	-	-	100.2	-	-	-	-	-	-	-
PDrop 2026.02	86.7	-	-	-	-	100	-	-	-	-	-	-	-
FastV 2026.02	86.6	-	-	-	-	98.6	-	-	-	-	-	-	-
IVC-Prune 2026.02	86.6	-	-	-	-	100.1	-	-	-	-	-	-	-
Vanilla 2026.02	86.5	-	-	-	-	100	-	-	-	-	-	-	-
FastV 2026.02	86.4	-	-	-	-	98.2	-	-	-	-	-	-	-
Qwen3-VL-8B 2026.05	86.29	-	-	-	-	-	-	-	-	-	-	-	-
Nullu 2025.12	86	-	-	-	-	-	-	-	-	-	-	-	-
D.P. 2026.03	86	-	-	-	-	-	-	-	-	-	-	-	-
Base 2026.07	86	-	-	-	-	-	-	-	-	-	4.32	4.03	-
FastV 2026.02	85.9	-	-	-	-	98.8	-	-	-	-	-	-	-
Oracle 2026.03	85.8	-	-	-	-	-	-	-	-	-	-	-	-
PDrop 2026.02	85.6	-	-	-	-	98	-	-	-	-	-	-	-
MMR1-7B 2026.05	85.07	-	-	-	-	-	-	-	-	-	-	-	-
Rewrite 2026.07	85	-	-	-	-	-	-	-	-	0.87	3.07	3.49	9
ICONS 2026.03	84.9	-	-	-	-	-	-	-	-	-	-	-	-
OPERA 2025.12	84.2	-	-	-	-	-	-	-	-	-	-	-	-
Beam Search 2025.12	84.12	-	-	-	-	-	-	-	-	-	-	-	-
Uniform 2026.03	83.7	-	-	-	-	-	-	-	-	-	-	-	-
R1-OneVision-RL-7B 2026.05	83.58	-	-	-	-	-	-	-	-	-	-	-	-
BadToken 2026.07	83	-	-	-	-	-	-	-	-	0.9	2.94	3.04	13
DyCo-RL 2026.06	82.7	-	-	-	-	-	-	-	-	-	-	-	-
GRPO Baseline 2026.06	82.3	-	-	-	-	-	-	-	-	-	-	-	-
BadToken 2026.07	82	-	-	-	-	-	-	-	-	0.92	3.72	2.89	9
H-GIVR 2026.02	81.83	-	-	-	-	-	-	-	-	-	-	-	-
Full KV Caching 2026.03	81.4	-	-	-	-	-	-	-	-	-	-	-	-
AttentionPack 2026.03	81.25	-	-	-	-	-	-	-	-	-	-	-	-
VCD 2025.12	81.24	-	-	-	-	-	-	-	-	-	-	-	-
Minicache 2026.03	81.2	-	-	-	-	-	-	-	-	-	-	-	-
FastV 2026.03	81.17	-	-	-	-	-	-	-	-	-	-	-	-
InstructBLIP 2023.10	81	-	-	-	-	-	-	-	-	-	-	-	-
Regular 2025.12	80.88	-	-	-	-	-	-	-	-	-	-	-	-
MMBoundary 2025.05	80.6	30.5	34.8	66.4	-	-	-	-	-	-	-	-	-
AttentionPack 2026.03	80	-	-	-	-	-	-	-	-	-	-	-	-
Rewrite 2026.07	80	-	-	-	-	-	-	-	-	0.89	3.39	3.3	4
RCE 2025.05	79.3	37.2	42.7	64.7	-	-	-	-	-	-	-	-	-
PDrop 2026.02	79.2	-	-	-	-	99.8	-	-	-	-	-	-	-
H2O 2026.03	79.1	-	-	-	-	-	-	-	-	-	-	-	-
FastV 2026.02	79	-	-	-	-	99.7	-	-	-	-	-	-	-
BadVision 2026.07	79	-	-	-	-	-	-	-	-	0.44	3.53	2.75	6
Vanilla 2026.02	78.9	-	-	-	-	100	-	-	-	-	-	-	-
IVC-Prune 2026.02	78.8	-	-	-	-	101.3	-	-	-	-	-	-	-
ScissorHands 2026.03	77.48	-	-	-	-	-	-	-	-	-	-	-	-
Conf-CSR 2025.05	77.4	41.3	46.3	62.3	-	-	-	-	-	-	-	-	-
BadVision 2026.07	77	-	-	-	-	-	-	-	-	0.37	2.67	2.76	7
AttentionPack 2026.03	76.88	-	-	-	-	-	-	-	-	-	-	-	-
FastV 2026.03	76.72	-	-	-	-	-	-	-	-	-	-	-	-
Full KV Caching 2026.03	76.64	-	-	-	-	-	-	-	-	-	-	-	-
Minicache 2026.03	76.54	-	-	-	-	-	-	-	-	-	-	-	-
H-GIVR 2026.02	76.42	-	-	-	-	-	-	-	-	-	-	-	-
Prophet 2023.10	76.4	-	-	-	-	-	-	-	-	-	-	-	-
H2O 2026.03	76.36	-	-	-	-	-	-	-	-	-	-	-	-
DRL 2025.05	76.2	40.6	44.2	62.8	-	-	-	-	-	-	-	-	-
AttentionPack 2026.03	75.91	-	-	-	-	-	-	-	-	-	-	-	-
Full KV Caching 2026.03	75.67	-	-	-	-	-	-	-	-	-	-	-	-
ViCor 2023.10	75.6	-	-	-	-	-	-	-	-	-	-	-	-
ScissorHands 2026.03	75.5	-	-	-	-	-	-	-	-	-	-	-	-
AttentionPack 2026.03	75.33	-	-	-	-	-	-	-	-	-	-	-	-
AttentionPack 2026.03	75.17	-	-	-	-	-	-	-	-	-	-	-	-
FastV 2026.03	75.1	-	-	-	-	-	-	-	-	-	-	-	-
H2O 2026.03	74.98	-	-	-	-	-	-	-	-	-	-	-	-
D.P. 2026.03	74.8	-	-	-	-	-	-	-	-	-	-	-	-
AssistGPT 2023.10	74.7	-	-	-	-	-	-	-	-	-	-	-	-
ScissorHands 2026.03	74.6	-	-	-	-	-	-	-	-	-	-	-	-
ICONS 2026.03	74.4	-	-	-	-	-	-	-	-	-	-	-	-
LLaVA-1.5-13B 2024.05	73.54	-	-	-	-	-	-	-	-	-	-	-	-
PromptCap 2023.10	73.2	-	-	-	-	-	-	-	-	-	-	-	-
SaySelf 2025.05	72.7	32.4	38.1	63.2	-	-	-	-	-	-	-	-	-
Active-Pro 2026.02	71.26	-	-	-	-	-	-	-	-	-	-	-	-
LLaVA-1.5-7B 2024.05	70.92	-	-	-	-	-	-	-	-	-	-	-	-
ViCor 2023.10	70.9	-	-	-	-	-	-	-	-	-	-	-	-
Uni-MoE w/ MoE-Task4 (8E) + Aux loss 2024.05	70.7	-	-	-	-	-	-	-	-	-	-	-	-
GPT-4 2023.10	70.3	-	-	-	-	-	-	-	-	-	-	-	-
Uni-MoE w/ MoE-Task4 (4E) 2024.05	70.22	-	-	-	-	-	-	-	-	-	-	-	-
Uni-MoE w/ MoE-Task4 (8E) 2024.05	70	-	-	-	-	-	-	-	-	-	-	-	-
Auto-CoT 2026.02	69.78	-	-	-	-	-	-	-	-	-	-	-	-

Showing 100 of 260 rows