Share your thoughts, 1 month free Claude Pro on usSee more

Safety Evaluation on WildJailbreak

0.101ASR

SET

Updated 4d ago

Evaluation Results

Method
SET 2026.04	0.101	-	-	-	-	-	-	-
Llama-3-8B-Instruct 2025.12	0.1315	-	0.8579	-	0.8476	0.8255	-	-
SET 2026.04	0.143	-	-	-	-	-	-	-
SET 2026.04	0.147	-	-	-	-	-	-	-
Qwen-1.5B-Instruct + CONTEXTLENS 2025.12	0.1755	-	0.6512	-	0.5381	0.8819	-	-
Llama-3-8B-Instruct + CONTEXTLENS 2025.12	0.178	-	0.8592	-	0.9	0.931	-	-
PreSafe 2026.03	0.188	-	-	-	-	-	-	-
SET 2026.04	0.191	-	-	-	-	-	-	-
SET 2026.04	0.201	-	-	-	-	-	-	-
TARS-1.5B 2025.12	0.254	-	0.8079	-	0.881	0.906	-	-
TARS-7B 2025.12	0.2645	-	0.8171	-	0.919	0.8881	-	-
SET 2026.04	0.265	-	-	-	-	-	-	-
SafeLoRA 2026.04	0.309	-	-	-	-	-	-	-
Qwen-1.5B-Instruct 2025.12	0.325	-	0.7607	-	0.8714	0.8976	-	-
SafePath 2026.03	0.328	-	-	-	-	-	-	-
SafeLoRA 2026.04	0.338	-	-	-	-	-	-	-
GPT-4o + CONTEXTLENS 2025.12	0.3435	-	0.7804	-	0.9619	0.9162	-	-
Qwen-3B-Instruct + CONTEXTLENS 2025.12	0.35	-	0.7631	-	0.9238	0.9111	-	-
SN-tune 2026.04	0.369	-	-	-	-	-	-	-
SafeLoRA 2026.04	0.374	-	-	-	-	-	-	-
LoRA 2026.04	0.386	-	-	-	-	-	-	-
SafeChain-8B 2025.12	0.3915	-	0.744	-	0.9571	0.8929	-	-
SN-tune 2026.04	0.399	-	-	-	-	-	-	-
LoRA 2026.04	0.416	-	-	-	-	-	-	-
SN-tune 2026.04	0.426	-	-	-	-	-	-	-
SafeLoRA 2026.04	0.427	-	-	-	-	-	-	-
SafeLoRA 2026.04	0.431	-	-	-	-	-	-	-
LoRA 2026.04	0.438	-	-	-	-	-	-	-
SafeLoRA 2026.04	0.465	-	-	-	-	-	-	-
SN-tune 2026.04	0.475	-	-	-	-	-	-	-
SafeChain 2026.03	0.48	-	-	-	-	-	-	-
SN-tune 2026.04	0.48	-	-	-	-	-	-	-
LoRA 2026.04	0.495	-	-	-	-	-	-	-
LoRA 2026.04	0.496	-	-	-	-	-	-	-
SN-tune 2026.04	0.509	-	-	-	-	-	-	-
LoRA 2026.04	0.521	-	-	-	-	-	-	-
GPT-4o 2025.12	0.5265	-	0.6407	-	0.9905	0.8741	-	-
Random 2026.04	0.551	-	-	-	-	-	-	-
Random 2026.04	0.556	-	-	-	-	-	-	-
Qwen-3B-Instruct 2025.12	0.5735	-	0.5971	-	0.9952	0.861	-	-
Random 2026.04	0.591	-	-	-	-	-	-	-
Random 2026.04	0.598	-	-	-	-	-	-	-
UnSafeChain 2026.03	0.62	-	-	-	-	-	-	-
Base 2026.04	0.625	-	-	-	-	-	-	-
Base 2026.04	0.625	-	-	-	-	-	-	-
DS-7B 2026.03	0.644	-	-	-	-	-	-	-
Random 2026.04	0.648	-	-	-	-	-	-	-
R2D 2026.03	0.65	-	-	-	-	-	-	-
Random 2026.04	0.669	-	-	-	-	-	-	-
Base 2026.04	0.676	-	-	-	-	-	-	-
Base 2026.04	0.676	-	-	-	-	-	-	-
Base 2026.04	0.772	-	-	-	-	-	-	-
Base 2026.04	0.772	-	-	-	-	-	-	-
Q3-8b 2026.02	-	0.312	0.81	-0.404	-	-	-	-
TR1S-8b/pos 2026.02	-	0.896	0.262	0.157	-	-	-	-
TR1S-8b/adh 2026.02	-	0.3	0.808	-0.423	-	-	-	-
DSR1-0528-8b 2026.02	-	0.684	0.484	-0.066	-	-	-	-
gpt-oss-20b 2026.02	-	0.963	0.155	0.084	-	-	-	-
gpt-oss-120b 2026.02	-	0.988	0.12	0.095	-	-	-	-
Q3-235b 2026.02	-	0.491	0.677	-0.264	-	-	-	-
DSR1-0528 2026.02	-	0.558	0.641	-0.189	-	-	-	-
PACT 2026.02	-	0.876	0.286	0.109	-	-	-	-
Base 2026.04	-	-	-	-	-	-	30.5	-
Random 2026.04	-	-	-	-	-	-	46.8	-
RSN-Tune 2026.04	-	-	-	-	-	-	44.9	-
SPA 2026.04	-	-	-	-	-	-	32.4	-
Base 2026.04	-	-	-	-	-	-	30.5	-
Random 2026.04	-	-	-	-	-	-	46.2	-
RSN-Tune 2026.04	-	-	-	-	-	-	44.1	-
SPA 2026.04	-	-	-	-	-	-	32.2	-
Base 2026.04	-	-	-	-	-	-	30.5	-
Random 2026.04	-	-	-	-	-	-	47.1	-
RSN-Tune 2026.04	-	-	-	-	-	-	45.3	-
SPA 2026.04	-	-	-	-	-	-	32.3	-
Base 2026.04	-	-	-	-	-	-	58	-
Random 2026.04	-	-	-	-	-	-	74.6	-
RSN-Tune 2026.04	-	-	-	-	-	-	72.7	-
SPA 2026.04	-	-	-	-	-	-	60	-
Base 2026.04	-	-	-	-	-	-	58	-
Random 2026.04	-	-	-	-	-	-	73.9	-
RSN-Tune 2026.04	-	-	-	-	-	-	72.1	-
SPA 2026.04	-	-	-	-	-	-	59.8	-
Base 2026.04	-	-	-	-	-	-	58	-
Random 2026.04	-	-	-	-	-	-	75.8	-
RSN-Tune 2026.04	-	-	-	-	-	-	73.6	-
SPA 2026.04	-	-	-	-	-	-	59.9	-
Base 2026.04	-	-	-	-	-	-	36	-
Random 2026.04	-	-	-	-	-	-	51.9	-
RSN-Tune 2026.04	-	-	-	-	-	-	50.1	-
SPA 2026.04	-	-	-	-	-	-	37.9	-
Base 2026.04	-	-	-	-	-	-	36	-
Random 2026.04	-	-	-	-	-	-	51.3	-
RSN-Tune 2026.04	-	-	-	-	-	-	49.6	-
SPA 2026.04	-	-	-	-	-	-	37.8	-
Base 2026.04	-	-	-	-	-	-	36	-
Random 2026.04	-	-	-	-	-	-	52.8	-
RSN-Tune 2026.04	-	-	-	-	-	-	50.9	-
SPA 2026.04	-	-	-	-	-	-	37.9	-
Original 2025.10	-	0.244	-	-	-	-	-	-
STAR 2025.10	-	0.755	-	-	-	-	-	-

Showing 100 of 116 rows