Share your thoughts, 1 month free Claude Pro on usSee more

Medical Report Generation on BIMCV n=1,505 cases (test)

0.2624RaTE Score

Astra

Updated 2d ago

Evaluation Results

Method	Links
Astra 2026.05		0.2624	0.4133	0.3783	0.2755	0.3448	0.353
LLaVA 2026.05		0.2189	0.2636	0.2513	0.143	0.197	0.2137
Gemini-3 2026.05		0.2076	0.2286	0.2066	0.1586	0.1596	0.1884
Lingshu-32B 2026.05		0.201	0.1571	0.1709	0.0739	0.078	0.12
Qwen3-VL-8B 2026.05		0.1954	0.1683	0.1669	0.1041	0.1043	0.1359
HuluMed-7B 2026.05		0.1907	0.1702	0.1736	0.0832	0.0817	0.1272
HuluMed-32B 2026.05		0.1904	0.1728	0.1747	0.0836	0.0814	0.1281
HuluMed-14B 2026.05		0.1904	0.173	0.1753	0.0832	0.0819	0.1284
R2GenGPT 2026.05		0.1823	0.1947	0.1752	0.1284	0.1856	0.171
M3D 2026.05		0.1803	0.1755	0.1552	0.0665	0.0547	0.113
RadFM 2026.05		0.1769	0.128	0.1153	0.0729	0.0468	0.0907
Lingshu-7B 2026.05		0.1598	0.0927	0.0766	0.0394	0.0448	0.0634
MedGemma-27B 2026.05		0.1479	0.0571	0.05	0.0239	0.0277	0.0397
MedGemma-4B 2026.05		0.14	0.0417	0.0508	0.0175	0.0165	0.0317