Share your thoughts, 1 month free Claude Pro on usSee more

Jailbreak Robustness on AdvBench

0Harmbench ASR

LLaDA-Instruct

Updated 22d ago

Evaluation Results

Method
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	3.5	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	3.5	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	3.5	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	3.5	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.4	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	33.9	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.4	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	33.9	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.4	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	33.9	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.4	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	33.9	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	4	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.2	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	39.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.2	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	39.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.2	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	39.6	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	99.2	-	-	-	-
LLaDA-1.5 2026.04	0	-	-	-	-	-	-	-	-	-	-	39.6	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	90.6	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	47.1	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	90.6	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	47.1	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	90.6	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	47.1	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	90.6	-	-	-	-
Dream-Instruct 2026.04	0	-	-	-	-	-	-	-	-	-	-	47.1	-	-	-	-
LLaDA-1.5 2026.04	0.2	-	-	-	-	-	-	-	-	-	-	4	-	-	-	-
LLaDA-1.5 2026.04	0.2	-	-	-	-	-	-	-	-	-	-	4	-	-	-	-
LLaDA-1.5 2026.04	0.2	-	-	-	-	-	-	-	-	-	-	4	-	-	-	-
Dream-Instruct 2026.04	1.5	-	-	-	-	-	-	-	-	-	-	45.4	-	-	-	-
Dream-Instruct 2026.04	1.5	-	-	-	-	-	-	-	-	-	-	59	-	-	-	-
Dream-Instruct 2026.04	2.9	-	-	-	-	-	-	-	-	-	-	37.3	-	-	-	-
Dream-Instruct 2026.04	3.3	-	-	-	-	-	-	-	-	-	-	57.9	-	-	-	-
Dream-Instruct 2026.04	12.1	-	-	-	-	-	-	-	-	-	-	45.4	-	-	-	-
LLaDA-1.5 2026.04	13.1	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
Dream-Instruct 2026.04	16.3	-	-	-	-	-	-	-	-	-	-	45.4	-	-	-	-
Dream-Instruct 2026.04	17.3	-	-	-	-	-	-	-	-	-	-	59	-	-	-	-
Dream-Instruct 2026.04	17.5	-	-	-	-	-	-	-	-	-	-	59	-	-	-	-
Dream-Instruct 2026.04	17.9	-	-	-	-	-	-	-	-	-	-	45.4	-	-	-	-
Dream-Instruct 2026.04	18.5	-	-	-	-	-	-	-	-	-	-	57.9	-	-	-	-
Dream-Instruct 2026.04	18.5	-	-	-	-	-	-	-	-	-	-	57.9	-	-	-	-
Dream-Instruct 2026.04	18.8	-	-	-	-	-	-	-	-	-	-	59	-	-	-	-
Dream-Instruct 2026.04	19.6	-	-	-	-	-	-	-	-	-	-	57.9	-	-	-	-
LLaDA-1.5 2026.04	20.6	-	-	-	-	-	-	-	-	-	-	0	-	-	-	-
LLaDA-Instruct 2026.04	28.8	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
Dream-Instruct 2026.04	31.3	-	-	-	-	-	-	-	-	-	-	37.3	-	-	-	-
Dream-Instruct 2026.04	32.1	-	-	-	-	-	-	-	-	-	-	37.3	-	-	-	-
Dream-Instruct 2026.04	32.1	-	-	-	-	-	-	-	-	-	-	37.3	-	-	-	-
LLaDA-Instruct 2026.04	38.3	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-1.5 2026.04	52.7	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-1.5 2026.04	53.8	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-1.5 2026.04	54.8	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-Instruct 2026.04	63.5	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-Instruct 2026.04	63.7	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-1.5 2026.04	68.3	-	-	-	-	-	-	-	-	-	-	0	-	-	-	-
LLaDA-1.5 2026.04	68.8	-	-	-	-	-	-	-	-	-	-	0	-	-	-	-
LLaDA-1.5 2026.04	69	-	-	-	-	-	-	-	-	-	-	0	-	-	-	-
LLaDA-Instruct 2026.04	77.9	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
LLaDA-Instruct 2026.04	81.2	-	-	-	-	-	-	-	-	-	-	0.2	-	-	-	-
Original 2025.10	-	48	4	38	92	86	74	98	84	94	-	-	-	-	-	-
SFT 2025.10	-	36	3	35	92	88	64	79	66	86	-	-	-	-	-	-
DPO 2025.10	-	34	2	42	88	78	64	78	60	82	-	-	-	-	-	-
MOSA 2025.10	-	16	0	14	90	84	60	80	56	74	-	-	-	-	-	-
Recovery Alignment (w/o inter) 2025.10	-	18	0	12	96	94	82	80	72	60	-	-	-	-	-	-
Recovery Alignment 2025.10	-	6	0	4	56	66	64	70	36	57	-	-	-	-	-	-
Original 2025.10	-	48	0	36	94	88	70	98	80	86	-	-	-	-	-	-
SFT 2025.10	-	48	2	40	88	86	48	92	80	90	-	-	-	-	-	-
DPO 2025.10	-	30	2	34	76	68	68	94	76	80	-	-	-	-	-	-
MOSA 2025.10	-	16	0	18	82	82	68	72	48	70	-	-	-	-	-	-
Recovery Alignment (w/o inter) 2025.10	-	36	2	32	84	82	74	70	50	66	-	-	-	-	-	-
Recovery Alignment 2025.10	-	4	0	6	62	60	64	64	34	62	-	-	-	-	-	-
Original 2025.10	-	90	54	78	98	94	90	82	64	90	-	-	-	-	-	-
SFT 2025.10	-	96	46	78	100	94	84	94	64	84	-	-	-	-	-	-
DPO 2025.10	-	60	40	54	90	80	57	74	66	86	-	-	-	-	-	-
MOSA 2025.10	-	56	8	48	80	68	70	80	57	76	-	-	-	-	-	-
Recovery Alignment (w/o inter) 2025.10	-	67	57	56	65	51	63	76	66	92	-	-	-	-	-	-
Recovery Alignment 2025.10	-	42	4	26	42	52	74	78	68	84	-	-	-	-	-	-
Qwen2.5-1.5B-Instruct 2026.04	-	-	-	-	-	-	-	-	-	-	10.8	-	-	-	-	-
FedDPO 2026.04	-	-	-	-	-	-	-	-	-	-	30.8	-	-	-	-	-
FedDetox 2026.04	-	-	-	-	-	-	-	-	-	-	14	-	-	-	-	-
Base 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	74.8	96	86.2	88
MTSA 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	32	41	36	37
MUSE 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	29.5	38	33.5	34
ICD 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	65	84	75	76.5
PPL-Filter 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	67	86	77	78.5
Goal Prioritization 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	61	80	73	74.5
SafeEnd 2026.05	-	-	-	-	-	-	-	-	-	-	-	-	4.5	4.9	0	0

Showing 100 of 115 rows