Share your thoughts, 1 month free Claude Pro on usSee more

Video Question Answering on MSRVTT

66.7Accuracy

LVLM

Updated 1mo ago

Evaluation Results

Method
LVLM 2026.01	66.7	-	-	-	-	-
FMVR-LLaVA 2026.03	65.2	-	-	-	-	-
LVLM 2026.01	65	-	-	-	-	-
FMVR-LLaVA 2026.03	64.8	-	-	-	-	-
PLLaVA 2026.01	63.2	-	-	-	-	-
ST-LLM 2026.01	63.2	-	-	-	-	-
FMVR-LLaVA 2026.03	62.5	-	-	-	-	-
PLLaVA 2026.01	62	-	-	-	-	-
Video-LLaVA 2026.01	59.2	-	-	-	-	-
Video-LLaVA 2026.03	59.2	-	-	100	-	-
Video-LLAVA 2026.03	59.2	-	-	-	-	-
LLaMA-VID 2026.01	58.9	-	-	-	-	-
FMVR-LLaVA 2026.03	58.3	-	-	-	-	-
PyramidDrop 2026.02	58	-	-	100.7	-	-
LLaMA-VID 2026.03	57.7	-	-	-	-	-
Video-LLaVA 2026.04	57.5	-	3.5	-	-	-
BT-Adapter 2026.03	57	-	-	-	-	-
Video-LLaVA 2025.06	56.8	-	3.48	-	-	-
Vanilla 2026.01	56.7	-	-	-	-	-
Video-LLaVA 2026.02	56.7	-	-	100	-	-
Vanilla 2025.05	56.7	-	-	-	-	-
MI-Pruner 2026.04	56.4	-	3.46	-	-	-
VisionTrim 2026.01	55.8	-	-	-	-	-
DUET-VLM (C) 2026.02	55.6	-	-	100.8	-	-
VisPruner 2026.03	55.6	-	-	-	-	-
VisPruner 2026.04	55.6	-	3.45	-	-	-
MI-Pruner 2026.04	55.3	-	3.49	-	-	-
DUET-VLM (C) 2026.02	55.2	-	-	97.6	-	-
MoB (with η-prior) 2025.05	55.2	-	-	-	-	-
Uniform Sampling 2026.01	54.9	-	-	-	-	-
Chat-UniVi 2026.01	54.6	-	-	-	-	-
VisionDrop 2025.06	54.6	-	3.42	-	-	-
TwigVLM 2025.05	54.6	-	-	-	-	-
Vanilla 2026.06	54.49	-	-	-	-	-
VideoChat2 2026.01	54.1	-	-	-	-	-
VisPruner 2026.04	54.1	-	3.41	-	-	-
VisionZip 2025.06	54	-	3.41	-	-	-
PRUNESID 2026.03	53.3	-	-	95.5	-	-
FastV 2026.04	53	-	3.4	-	-	-
MovieChat 2026.03	52.7	-	-	-	-	-
FMVR-LLaVA 2026.03	52.4	-	-	-	-	-
FastV 2026.04	52.4	-	3.39	-	-	-
VisionZip 2026.02	52.1	-	-	91	-	-
VisionZip 2025.05	52.1	-	-	-	-	-
VisionZip 2026.03	52.1	-	-	93.2	-	-
VisionZip 2026.03	52.1	-	-	-	-	-
CLASP 2026.04	51.58	-	-	-	52.95	-
Upper Bound 2026.04	51.28	-	-	-	52.23	-
VALLEY 2026.01	50.8	-	-	-	-	-
MiCo 2024.06	50.4	-	-	-	-	-
GPT4Video 2026.01	49.8	-	-	-	-	-
SparseVLM 2026.04	49.69	-	-	-	51.22	-
Video-ChatGPT 2026.01	49.3	-	-	-	-	-
Video-ChatGPT 2026.03	49.3	-	-	-	-	-
SOTA 2024.06	49.2	-	-	-	-	-
MA-LMM 2026.01	48.5	-	-	-	-	-
PriorTR + Merging 2026.06	48.3	-	-	-	-	2.36
SparseVLM 2026.06	48	-	-	-	-	2.38
DCP-Prune 2026.06	47.7	-	-	-	-	-
Video-LLaVA 2026.06	47.5	-	-	-	-	2.32
Brote-IM-XXL 2024.02	45.94	-	-	-	-	-
Co-Tokenization 2023.10	45.7	-	-	-	-	-
Brote-EX-XXL 2024.02	45.24	-	-	-	-	-
Brote-IM-XL 2024.02	45.08	-	-	-	-	-
FastV 2025.06	45	-	3.14	-	-	-
VideoChat 2026.03	45	-	-	-	-	-
SCOPE 2026.06	44.81	-	-	-	-	-
InternVideo 2023.10	44.8	-	-	-	-	-
VIOLETv2 2023.10	44.5	-	-	-	-	-
InternVideo 2023.10	44.2	-	-	-	-	-
OmniVL 2023.10	44.1	-	-	-	-	-
InternVideo 2023.10	44.1	-	-	-	-	-
VIOLET 2023.10	43.9	-	-	-	-	-
LLaMA Adapter 2026.03	43.8	-	-	-	-	-
Brote-EX-XL 2024.02	43.14	-	-	-	-	-
MERLOT 2023.10	43.1	-	-	-	-	-
All-in-one 2023.10	42.9	-	-	-	-	-
PriorTR + Merging 2026.06	42.9	-	-	-	-	2.66
Video-LLaVA 2026.06	42.7	-	-	-	-	2.69
MMICL-XL 2024.02	42.36	-	-	-	-	-
ALPRO 2023.10	42.1	-	-	-	-	-
SparseVLM 2026.06	41.9	-	-	-	-	2.63
Just Ask 2023.10	41.8	-	-	-	-	-
SCOPE 2026.06	40.81	-	-	-	-	-
MMICL-XXL 2024.02	39.46	-	-	-	-	-
PriorTR 2026.06	39.4	-	-	-	-	1.95
DCP-Prune 2026.06	37.59	-	-	-	-	-
FlowCut 2026.06	37.45	-	-	-	-	-
ClipBERT 2023.10	37.4	-	-	-	-	-
PriorTR 2026.06	35.1	-	-	-	-	2.35
FastV 2026.06	34.3	-	-	-	-	1.69
Emu2-Chat 2023.12	31.4	-	-	-	-	-
EMU-2 2024.02	31.4	-	-	-	-	-
FastV 2026.06	31.4	-	-	-	-	2.19
FlowCut 2026.06	31.39	-	-	-	-	-
SparseVLM 2026.02	31	-	-	82.4	-	-
SparseVLM 2025.05	31	-	-	-	-	-
SparseVLM 2026.03	31	-	-	86.5	-	-
SparseVLM 2026.03	31	-	-	-	-	-
Video-LLAMA 2026.03	29.6	-	-	-	-	-

Showing 100 of 149 rows