Share your thoughts, 1 month free Claude Pro on usSee more

Medical Report Generation on MIMIC-CXR (test)

0.415ROUGE-L

EIR

Updated 1mo ago

Evaluation Results

Method
EIR 2025.12	0.415	-	0.248	-	0.515	0.382	0.31	-
Nguyen 2025.12	0.39	-	0.224	-	0.495	0.36	0.278	-
NeuroSymb-MRG (Ours) 2026.03	0.362	-	0.175	0.225	0.487	0.332	0.234	-
Zhou et al. (2021) 2024.06	0.335	-	-	0.19	-	-	-	-
GumbelTrans 2025.12	0.318	-	0.146	-	0.415	0.272	0.193	-
AdpAtt 2025.12	0.314	-	0.134	-	0.384	0.251	0.178	-
SA&T 2025.12	0.31	-	0.128	-	0.37	0.24	0.17	-
MRG-LLM 2026.03	0.296	-	0.129	0.163	0.416	0.267	0.182	-
METransformer 2024.10	0.291	0.362	0.124	0.152	0.386	0.25	0.169	-
BootstrappingLLM 2024.10	0.291	-	0.128	0.175	0.402	0.262	0.18	-
MambaXray-VL-Large 2024.10	0.289	0.241	0.133	0.167	0.422	0.268	0.184	-
CMM+RL 2026.03	0.287	-	0.109	0.151	0.381	0.232	0.155	-
R2GenGPT 2024.10	0.285	0.244	0.125	0.167	0.408	0.256	0.174	-
PPKED 2023.03	0.284	0.237	0.106	0.149	-	-	-	-
MGSK 2023.03	0.284	0.203	0.115	-	-	-	-	-
DCL 2023.03	0.284	0.281	0.109	0.15	-	-	-	-
PPKED 2024.10	0.284	0.237	0.106	0.149	0.36	0.224	0.149	-
DCL 2024.10	0.284	0.281	0.109	0.15	-	-	-	-
R2Gen 2025.12	0.284	-	0.103	-	0.353	0.218	0.145	-
PPKED 2025.12	0.284	-	0.106	-	0.36	0.224	0.149	-
MGSK 2025.12	0.284	-	0.115	-	0.363	0.228	0.156	-
PPKED 2026.03	0.284	-	0.106	0.149	0.36	0.224	0.149	-
RAMT 2026.03	0.284	-	0.113	0.153	0.362	0.229	0.157	-
CA 2023.03	0.283	-	0.109	0.151	-	-	-	-
AlignTrans 2024.10	0.283	-	0.112	0.158	0.378	0.235	0.156	-
MambaXray-VL-Base 2024.10	0.283	0.206	0.129	0.162	0.42	0.264	0.18	-
CA 2025.12	0.283	-	0.109	-	0.35	0.219	0.152	-
Contra.Attn. 2026.03	0.283	-	0.109	0.151	0.35	0.219	0.152	-
Aligntransformer 2026.03	0.283	-	0.112	0.158	0.378	0.235	0.156	-
MCGN 2026.03	0.282	-	0.12	0.143	0.373	0.235	0.162	-
CMCL 2023.03	0.281	-	0.097	0.133	-	-	-	-
CMCL 2024.10	0.281	-	0.097	0.133	0.344	0.217	0.14	-
CMCL 2026.03	0.281	-	0.097	0.133	0.344	0.217	0.14	-
R2GenGPT 2026.03	0.28	-	0.123	0.149	0.387	0.248	0.17	-
XPRONET* 2026.03	0.279	-	0.105	0.138	0.344	0.215	0.146	-
CMN 2023.03	0.278	-	0.106	0.142	-	-	-	-
R2GenCMN 2024.10	0.278	-	0.106	0.142	0.353	0.218	0.148	-
CMN 2025.12	0.278	-	0.106	-	0.353	0.218	0.148	-
CMN 2026.03	0.278	-	0.106	0.142	0.353	0.218	0.148	-
R2Gen 2023.03	0.277	0.253	0.103	0.142	-	-	-	-
R2Gen 2024.10	0.277	-	0.103	0.142	0.353	0.218	0.145	-
R2Gen 2026.03	0.277	-	0.103	0.142	0.353	0.218	0.145	-
Clinical-BERT 2024.10	0.275	0.151	0.106	0.144	0.383	0.23	0.151	-
M2TR 2023.03	0.272	-	0.107	0.145	-	-	-	-
M2TR 2025.12	0.272	-	0.107	-	0.378	0.232	0.154	-
M2Tr.Prog. 2026.03	0.272	-	0.107	0.145	0.378	0.232	0.154	-
PromptMRG 2024.10	0.268	-	0.112	0.157	0.398	-	-	-
PromptMRG 2026.03	0.268	-	0.112	0.157	0.398	-	-	-
TopDown 2023.03	0.267	0.073	0.092	0.129	-	-	-	-
Transformer 2026.03	0.267	-	0.092	0.129	0.316	0.199	0.14	-
AdaAtt 2026.03	0.267	-	0.094	0.128	0.314	0.198	0.132	-
Up-Down 2026.03	0.267	-	0.092	0.128	0.317	0.195	0.13	-
Att2in 2026.03	0.264	-	0.095	0.122	0.314	0.198	0.133	-
M2Transformer 2026.03	0.264	-	0.101	0.134	0.332	0.21	0.142	-
Show-Tell 2026.03	0.256	-	0.088	0.122	0.308	0.19	0.125	-
VLCI† 2026.03	0.256	-	0.103	0.136	0.357	0.216	0.144	-
Dragonfly-Med 2024.06	0.252	0.509	-	0.236	-	-	-	-
MedRAT 2026.03	0.251	-	0.086	-	0.365	-	-	-
RATCHET 2021.07	0.24	0.493	-	0.101	0.232	-	-	0.127
BiomedGPT 2024.06	0.238	0.147	-	0.142	-	-	-	-
Baseline 2021.07	0.217	0.419	-	0.108	0.208	-	-	0.107
TieNet 2021.07	0.2	0.411	-	0.069	0.19	-	-	0.084
Miura et al. (2020) 2024.06	-	0.509	-	-	-	-	-	-