Share your thoughts, 1 month free Claude Pro on usSee more

Medical Image Captioning on CT-Rate (test)

0.351RaTE Score

Astra

Updated 2d ago

Evaluation Results

Method	Links
Astra 2026.05		0.351	0.3844	0.514	0.4159	0.4457	0.44
R2GenGPT 2026.05		0.3084	0.2798	0.3829	0.2886	0.3167	0.317
LLaVA 2026.05		0.2911	0.2658	0.3025	0.2503	0.2988	0.2793
HuluMed-14B 2026.05		0.2534	0.2276	0.2875	0.2157	0.2402	0.2427
HuluMed-32B 2026.05		0.2528	0.2274	0.3059	0.2278	0.2388	0.25
HuluMed-7B 2026.05		0.2361	0.1926	0.2708	0.1889	0.1923	0.2111
Lingshu-32B 2026.05		0.2232	0.1158	0.2071	0.0654	0.073	0.1153
Gemini-3 2026.05		0.2225	0.1817	0.2243	0.1409	0.1459	0.1732
Qwen3-VL-8B 2026.05		0.2058	0.0963	0.1831	0.0648	0.0636	0.102
M3D 2026.05		0.2038	0.1352	0.1989	0.074	0.0677	0.1189
RadFM 2026.05		0.1881	0.0688	0.0891	0.0556	0.0537	0.0668
Lingshu-7B 2026.05		0.169	0.0635	0.0601	0.0426	0.0464	0.0532
MedGemma-27B 2026.05		0.1622	0.0327	0.0546	0.0147	0.0069	0.0272
MedGemma-4B 2026.05		0.1513	0.0191	0.0336	0.0132	0.0119	0.0194