Share your thoughts, 1 month free Claude Pro on usSee more

Machine Unlearning on TOFU Forget10 (10% authors split)

0.99Forget Quality - Rouge-L

Original

Updated 1mo ago

Evaluation Results

Method
Original 2025.09	0.99	0.51	0	0.98	0.47	0.94	0.62	0.89	0.55	0.63
GD 2025.09	0.82	0.51	0	0.92	0.47	0.92	0.6	0.88	0.55	0.62
GD 2025.09	0.82	0.51	0	0.92	0.47	0.92	0.6	0.88	0.55	0.62
IHL 2025.09	0.73	0.57	0	0.88	0.45	0.94	0.64	0.89	0.59	0.64
IHL 2025.09	0.73	0.57	0	0.88	0.45	0.94	0.64	0.89	0.59	0.64
NPO 2025.09	0.53	0.65	0	0.54	0.35	0.94	0.5	0.9	0.51	0.47
IHL 2025.09	0.53	0.49	0	0.76	0.49	0.39	0.45	0.71	0.5	0.51
NPO 2025.09	0.53	0.65	0	0.54	0.35	0.94	0.5	0.9	0.51	0.47
GA 2025.09	0.48	0.66	0.0024	0.49	0.33	0.93	0.51	0.91	0.5	0.39
GA 2025.09	0.48	0.66	0.0024	0.49	0.33	0.93	0.51	0.91	0.5	0.39
KL 2025.09	0.46	0.65	0	0.47	0.35	0.93	0.55	0.89	0.56	0.49
KL 2025.09	0.46	0.65	0	0.47	0.35	0.93	0.55	0.89	0.56	0.49
NPO 2025.09	0.45	0.61	0	0.45	0.38	0.35	0.39	0.71	0.43	0.37
NPO 2025.09	0.45	0.65	0.0005	0.45	0.35	0.3	0.37	0.69	0.42	0.37
DPO 2025.09	0.44	0.55	0	0.66	0.44	0.82	0.54	0.87	0.51	0.57
DPO 2025.09	0.44	0.55	0	0.66	0.44	0.82	0.54	0.87	0.51	0.57
DPO 2025.09	0.41	0.49	0	0.67	0.47	0.33	0.43	0.73	0.49	0.48
IHL 2025.09	0.41	0.51	0	0.77	0.49	0.36	0.46	0.69	0.52	0.5
Retain90 2025.09	0.41	0.66	1	0.98	0.47	0.92	0.61	0.88	0.55	0.63
GD 2025.09	0.37	0.53	0	0.41	0.44	0.19	0.44	0.6	0.46	0.36
GD+Sine 2025.09	0.32	0.53	0.87	0.92	0.47	0.94	0.62	0.89	0.6	0.68
DPO 2025.09	0.32	0.48	0	0.76	0.48	0.32	0.43	0.72	0.49	0.48
GD+Sine 2025.09	0.32	0.53	0.87	0.92	0.47	0.94	0.62	0.89	0.6	0.68
LoKU 2025.09	0.29	0.65	0.29	0.91	0.45	0.89	0.62	0.88	0.57	0.63
LoKU 2025.09	0.29	0.65	0.29	0.91	0.45	0.89	0.62	0.88	0.57	0.63
LoKU 2025.09	0.26	0.49	0	0.75	0.5	0.36	0.49	0.67	0.51	0.51
GD+Sine 2025.09	0.23	0.45	0.654	0.93	0.48	0.42	0.46	0.76	0.5	0.52
GD+Sine 2025.09	0.22	0.48	0.942	0.9	0.48	0.42	0.45	0.75	0.49	0.52
GD 2025.09	0.2	0.52	0	0.25	0.46	0.02	0.5	0.28	0.5	0.13
LoKU 2025.09	0.13	0.56	0.0121	0.7	0.47	0.32	0.48	0.67	0.55	0.5
GD+FILA 2025.09	0.12	0.65	0	0.11	0.23	0	0.3	0.03	0.28	0
GD+FILA 2025.09	0.08	0.5	0	0.09	0.22	0	0.52	0.04	0.34	0
GA+FILA 2025.09	0.02	0.86	0	0.02	0.09	0	0.19	0	0.18	0
GA+FILA 2025.09	0.02	0.86	0	0.02	0.09	0	0.19	0	0.18	0
GD+FILA 2025.09	0.01	0.85	0	0.01	0.09	0	0.18	0	0.18	0
KL 2025.09	0.01	0.77	0	0.01	0.16	0	0.24	0	0.25	0
GA 2025.09	0.01	0.76	0	0.01	0.15	0	0.24	0	0.24	0
KL 2025.09	0.01	0.7	0	0.01	0.14	0	0.41	0	0.35	0
GA 2025.09	0.01	0.71	0	0.01	0.14	0	0.41	0	0.35	0
GD+FILA 2025.09	0.01	0.85	0	0.01	0.09	0	0.18	0	0.18	0
GA+FILA 2025.09	0	0.35	0	0	0.25	0	0.38	0	0.32	0
GA+FILA 2025.09	0	0.31	0	0	0.28	0	0.33	0	0.43	0