Share your thoughts, 1 month free Claude Pro on usSee more

Instruction-based text editing on InstrEdit-Bench

0.1714Diff-BLEU (Code)

HyperEdit-Pro

Updated 3mo ago

Evaluation Results

Method	Links
HyperEdit-Pro 2025.12		0.1714	0.2432	0.0472	0.286	0.187	0.288	0.3653	0.1137	0.4245	0.2979
Llama-3.2 2025.12		0.0568	0.1455	0.0523	0.2746	0.1323	0.1677	0.2492	0.1045	0.383	0.2261
HyperEdit 2025.12		0.0515	0.1544	0.0693	0.3043	0.1449	0.1569	0.2632	0.1114	0.4123	0.236
FineEdit-Pro 2025.12		0.0497	0.1278	0.0356	0.3617	0.1437	0.1668	0.2295	0.0674	0.4744	0.2345
HyperEdit 2025.12		0.0492	0.1706	0.0535	0.3527	0.1565	0.1539	0.2803	0.1014	0.4792	0.2537
FineEdit-X 2025.12		0.0483	0.1176	0.0389	0.3499	0.1387	0.16	0.2101	0.0867	0.4536	0.2276
Llama-3.2 2025.12		0.0366	0.0886	0.0272	0.2573	0.1139	0.1631	0.2424	0.08	0.3769	0.2156
Llama-3.1-Instruct 2025.12		0.0335	0.1244	0.0214	0.2523	0.1079	0.1123	0.2194	0.0519	0.3504	0.1835
Qwen-3 2025.12		0.032	0.0827	0.0171	0.2923	0.106	0.0991	0.1463	0.0417	0.3992	0.1716
LLama-3.1-Instruct 2025.12		0.0286	0.0729	0.0119	0.2458	0.0898	0.0983	0.1379	0.0332	0.3396	0.1523
Qwen-2.5-Instruct 2025.12		0.0281	0.0928	0.0194	0.2722	0.1031	0.0847	0.1623	0.0471	0.3814	0.1689
Qwen-2.5-Instruct 2025.12		0.028	0.0929	0.0187	0.2791	0.1047	0.084	0.1695	0.0472	0.3897	0.1726