Our new X account is live! Follow @wizwand_team for updates

Radiology Report Generation on CheXpert Plus (test)

0.276RG-L Score

MambaXray-VL-L

Updated 4d ago

Evaluation Results

Method
MambaXray-VL-L 2024.10	0.276	-	-	-	0.112	-	0.157	0.139	0.377	0.319	0.335
Vicuna-V1.5 2024.10	0.272	-	-	-	0.104	-	0.16	0.202	0.334	0.258	0.276
Qwen-2 2024.10	0.27	-	-	-	0.1	-	0.142	0.159	0.313	0.269	0.261
Orca-2 2024.10	0.27	-	-	-	0.103	-	0.161	0.199	0.33	0.251	0.271
Llama-2 2024.10	0.269	-	-	-	0.101	-	0.16	0.214	0.321	0.254	0.267
Yi-1.5 2024.10	0.269	-	-	-	0.096	-	0.138	0.155	0.336	0.241	0.243
Deepseek-LLM 2024.10	0.268	-	-	-	0.096	-	0.137	0.15	0.336	0.256	0.253
Llama-2 2024.10	0.267	-	-	-	0.102	-	0.157	0.179	0.315	0.244	0.26
MambaXray-VL-B 2024.10	0.267	-	-	-	0.105	-	0.149	0.117	0.333	0.264	0.273
MAMBAXRAY-VL-B 2026.02	0.267	-	-	-	-	-	0.149	0.117	0.333	0.264	0.273
MCA-RG 2025.07	0.266	0.367	0.218	0.149	0.102	0.147	-	-	-	-	-
Orca-2 2024.10	0.266	-	-	-	0.1	-	0.159	0.187	0.317	0.242	0.257
R2GenGPT 2024.10	0.266	-	-	-	0.101	-	0.145	0.123	0.315	0.244	0.26
R2GENGPT 2026.02	0.266	-	-	-	-	-	0.145	0.123	0.315	0.244	0.26
XProNet 2024.10	0.265	-	-	-	0.1	-	0.146	0.121	0.314	0.247	0.259
R2GenCSR 2024.10	0.265	-	-	-	0.1	-	0.146	0.121	0.315	0.247	0.259
R2GENCSR 2026.02	0.265	-	-	-	-	-	0.146	0.121	0.315	0.247	0.259
R2GenCMN 2025.07	0.264	0.336	0.2	0.131	0.09	0.133	-	-	-	-	-
WarmStart 2025.07	0.263	0.35	0.207	0.134	0.091	0.134	-	-	-	-	-
Yi-1.5 2024.10	0.263	-	-	-	0.091	-	0.131	0.136	0.322	0.229	0.226
R2Gen 2025.07	0.262	0.325	0.195	0.13	0.09	0.129	-	-	-	-	-
Qwen-1.5 2024.10	0.262	-	-	-	0.098	-	0.139	0.139	0.303	0.233	0.241
ORGan 2024.10	0.261	-	-	-	0.086	-	0.135	0.107	0.288	0.287	0.277
Token-Mixer 2024.10	0.261	-	-	-	0.091	-	0.135	0.098	0.309	0.27	0.288
R2GenCMN 2024.10	0.256	-	-	-	0.087	-	0.127	0.102	0.329	0.241	0.231
R2GENCMN 2026.02	0.256	-	-	-	-	-	0.127	0.102	0.329	0.241	0.231
MiniGPT-Med 2025.07	0.255	0.341	0.194	0.121	0.079	0.125	-	-	-	-	-
TIMER 2024.10	0.254	-	-	-	0.083	-	0.121	0.104	0.345	0.238	0.234
WCL 2024.10	0.253	-	-	-	0.084	-	0.126	0.103	0.335	0.259	0.256
CAMANet 2024.10	0.249	-	-	-	0.083	-	0.118	0.09	0.328	0.224	0.216
M2KT 2024.10	0.247	-	-	-	0.078	-	0.101	0.077	0.044	0.142	0.058
VLCI 2024.10	0.247	-	-	-	0.08	-	0.114	0.072	0.341	0.175	0.163
R2Gen 2024.10	0.246	-	-	-	0.081	-	0.113	0.077	0.318	0.2	0.181
R2GEN 2026.02	0.246	-	-	-	-	-	0.113	0.077	0.318	0.2	0.181
CvT2DistilGPT2 2024.10	0.238	-	-	-	0.067	-	0.118	0.101	0.285	0.252	0.246
CVT2DISTILGPT2 2026.02	0.238	-	-	-	-	-	0.118	0.101	0.285	0.252	0.246
Zhu et al. 2024.10	0.235	-	-	-	0.074	-	0.128	0.078	0.217	0.308	0.205
PromptMRG 2024.10	0.222	-	-	-	0.095	-	0.121	0.044	0.258	0.265	0.281
Llama-3.1 2024.10	0.221	-	-	-	0.075	-	0.121	0.136	0.295	0.251	0.242
Llama-3 2024.10	0.22	-	-	-	0.077	-	0.121	0.134	0.306	0.232	0.222
ASGMD 2024.10	0.22	-	-	-	0.063	-	0.094	0.044	0.146	0.108	0.055
Wang et al. 2024.10	0.22	-	-	-	0.064	-	0.11	0.059	0.175	0.099	0.078
R2GENGPT 2026.02	0.22	-	-	-	-	-	0.121	0.134	0.306	0.232	0.222
InternLM 2024.10	0.207	-	-	-	0.063	-	0.136	0.104	0.307	0.274	0.284
GPT2-Medium 2024.10	0.198	-	-	-	0.063	-	0.104	0.067	0.358	0.186	0.165
LAYER-WISE EXPERT-ALIGNED DECODING (LEAD) 2026.02	0.197	-	-	-	-	-	0.125	0.082	0.32	0.267	0.275
LAYER-WISE EXPERT-ALIGNED DECODING (LEAD) 2026.02	0.192	-	-	-	-	-	0.115	0.08	0.296	0.242	0.25
InternVL-2 2024.10	0.188	-	-	-	0.058	-	0.112	0.085	0.196	0.127	0.132
LAYER-WISE EXPERT-ALIGNED DECODING (LEAD) 2026.02	0.188	-	-	-	-	-	0.108	0.075	0.282	0.237	0.243
R2GenRL 2024.10	0.186	-	-	-	0.035	-	0.101	0.012	0.193	0.229	0.196
R2GENRL 2026.02	0.186	-	-	-	-	-	0.101	0.012	0.193	0.229	0.196
MiniCPM-V2.5 2024.10	0.177	-	-	-	0.046	-	0.085	0.076	0.254	0.152	0.122
MSAT 2024.10	0.156	-	-	-	0.036	-	0.066	0.018	0.044	0.142	0.057