Share your thoughts, 1 month free Claude Pro on usSee more

Video Question-Answering on LongVideoBench

77.6Accuracy

Gemini-2.5-Pro

Updated 4d ago

Evaluation Results

Method
Gemini-2.5-Pro 2026.03	77.6	-	-	-	-	-	-
Seed1.5-VL 2026.03	74	-	-	-	-	-	-
A4VL 2026.03	72.2	-	-	-	-	-	-
LLaVA-OneVision 2025.01	68	-	-	-	-	-	-
Qwen3-VL-8B 2026.01	67.6	-	2.2	-	-	-	-
VideoAuto-R1 2026.01	67.4	20	52	-	-	-	-
LVAgent 2026.03	66.9	-	-	-	-	-	-
GPT-4o 2026.03	66.7	-	-	-	-	-	-
GPT-4o 2025.06	66.7	-	-	-	-	-	-
GPT-4o(0513) 2025.06	66.7	-	-	-	-	-	-
GPT-4o 2026.03	66.7	-	-	-	-	-	-
InternVL-3-78B 2025.06	65.7	-	-	-	-	-	-
VideoChat-A1 2025.06	65.4	-	-	-	-	-	-
VideoRAG-72B 2025.06	65.4	-	-	-	-	-	-
VideoChat-A1 2025.06	65.4	-	-	-	-	-	-
VideoRAG-72B 2026.03	65.4	-	-	-	-	-	-
VideoChat-A1 2025.06	65.2	-	-	-	-	-	-
VideoChat-A1 2025.06	65.2	-	-	-	-	-	-
LLAVA-Video-72B 2025.06	64.9	-	-	-	-	-	-
Vanilla 2026.03	64.3	-	-	-	-	-	-
VideoChat-Flash 2025.01	64.2	-	-	-	-	-	-
VideoChat-A1 2025.06	64.2	-	-	-	-	-	-
VideoChat-A1 2025.06	64.2	-	-	-	-	-	-
Gemini-1.5-Pro 2025.01	64	-	-	-	-	-	-
Gemini-1.5-Pro 2025.06	64	-	-	-	-	-	-
Gemini 1.5 Pro 2025.06	64	-	-	-	-	-	-
Gemini 1.5Pro 2026.03	64	-	-	-	-	-	-
InternVL-2.5-78B 2025.06	63.6	-	-	-	-	-	-
LLaVA-OneVision-72B 2025.06	63.2	-	-	-	-	-	-
LLaVA-OneVision-72B 2026.03	63.2	-	-	-	-	-	-
Aria-25.3B 2026.03	63	-	-	-	-	-	-
InternVL3.5-8B 2026.03	62.5	-	-	-	-	-	-
ToMe 2026.03	62	-	-	-	-	-	-
ResAdapt 2026.03	61.9	-	-	-	-	-	-
ToMe 2026.03	61.6	-	-	-	-	-	-
Qwen3-VL-8B-Instruct 2026.03	61.5	-	-	-	-	-	-
VideoChat-R1.5 2026.01	61.4	-	133	-	-	-	-
VisionZip 2026.03	61.3	-	-	-	-	-	-
Random Drop 2026.03	61.3	-	-	-	-	-	-
VisionZip 2026.03	61.3	-	-	-	-	-	-
Random Drop 2026.03	61.2	-	-	-	-	-	-
LLaVA-Video-7B-Qwen2 2026.03	61.1	-	-	-	-	-	-
Qwen2.5-VL-7B 2026.01	60.9	-	3	-	-	-	-
FixedScale 2026.03	60.9	-	-	-	-	-	-
InternVL3.5-4B 2026.03	60.8	-	-	-	-	-	-
LLaVA-Video-72B-Qwen2 2026.03	60.7	-	-	-	-	-	-
InternVideo2.5 (InternVL2.5+LRC) 2025.01	60.6	-	-	-	-	-	-
InternVideo-2.5-8B 2025.06	60.6	-	-	-	-	-	-
InternVideo-2.5-8B 2025.06	60.6	-	-	-	-	-	-
Video-o3 (SFT+RL) 2026.01	60.5	-	-	-	-	-	-
VideoAuto-R1 2026.01	60.5	39	44	-	-	-	-
Vanilla 2026.03	60.3	-	-	-	-	-	-
ResAdapt 2026.03	60.2	-	-	-	-	-	-
VideoAuto-R1 + ResAdapt 2026.03	60.2	-	-	-	-	-	-
ResAdapt 2026.03	60.2	-	-	-	-	-	-
LOVE-R1 2026.01	60.1	-	-	-	-	-	-
LOVE-R1 2026.01	60.1	-	-	-	-	-	-
InternVL2.5 2025.01	60	-	-	-	-	-	-
InternVL2.5-8B 2026.03	60	-	-	-	-	-	-
InternVL-2.5-8B 2025.06	60	-	-	-	-	-	-
InternVL-2.5-8B 2025.06	60	-	-	-	-	-	-
VideoLLaMA3-7B 2026.03	59.8	-	-	-	-	-	-
BOLT 2026.03	59.6	-	-	-	-	-	-
FixedScale 2026.03	59.5	-	-	-	-	-	-
BIMBA-LLaVA 2025.03	59.46	-	-	-	-	-	-
Video-o3 (RL) 2026.01	59.3	-	-	-	-	-	-
Qwen3-VL-4B-Instruct 2026.03	59.3	-	-	-	-	-	-
POINTS-Long 2026.04	59.3	-	-	-	-	-	-
POINTS-Long 2026.04	59.2	-	-	-	-	-	-
GPT4-V 2025.01	59.1	-	-	-	-	-	-
VideoAuto-R1 2026.03	59.1	-	-	-	-	-	-
VisionZip 2026.03	59.1	-	-	-	-	-	-
POINTS-Long 2026.04	59.1	-	-	-	-	-	-
Random Drop 2026.03	59	-	-	-	-	-	-
FlashVid 2026.03	59	-	-	-	-	-	-
Vanilla 2026.03	58.9	-	-	-	-	-	-
VideoAuto-R1 2026.03	58.9	-	-	-	-	-	-
InternVL3-8B 2026.03	58.8	-	-	-	-	-	-
R-MSD (4B) 2026.03	58.8	-	-	-	-	-	-
InternVL-3-8B 2025.06	58.8	-	-	-	-	-	-
POINTS-Long 2026.04	58.8	-	-	-	-	-	-
FlashVid 2026.03	58.6	-	-	-	-	-	-
ResAdapt 2026.03	58.6	-	-	-	-	-	-
Vanilla 2026.03	58.6	-	-	-	-	-	-
ToMe 2026.03	58.6	-	-	-	-	-	-
Random Drop 2026.03	58.4	-	-	-	-	-	-
Random Drop 2026.03	58.3	-	-	-	-	-	-
LLaVA-Video 2025.03	58.2	-	-	-	-	-	-
LLaVA-Video 2026.01	58.2	-	-	-	-	-	-
LLaVA-Video-7B 2025.06	58.2	-	-	-	-	-	-
ResAdapt 2026.03	58.2	-	-	-	-	-	-
LongVILA-R1 2026.01	58	-	-	-	-	-	-
ToMe 2026.03	58	-	-	-	-	-	-
Random Drop 2026.03	57.8	-	-	-	-	-	-
VideoAuto-R1 + ResAdapt 2026.03	57.8	-	-	-	-	-	-
Video-Zoomer 2026.01	57.7	-	-	-	-	-	-
ResAdapt 2026.03	57.5	-	-	-	-	-	-
InternVL3.5-2B 2026.03	57.4	-	-	-	-	-	-
ToMe 2026.03	57.4	-	-	-	-	-	-
Original SFT+RL (4B) 2026.03	57.2	-	-	-	-	-	-

Showing 100 of 191 rows