Jailbreak Attack Evaluation on AdvBench
94GPT-3.5 Success Rate
CodeAttack
Updated 4d ago
Evaluation Results
| Method | Links | |||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
2024.03 | 94 | - | - | - | - | - | - | - | - | - | - | - | 51 | 22 | 12 | 89 | 24 | 33 | 40 | 93 | - | |
2024.03 | 92 | - | - | - | - | - | - | - | - | - | - | - | 68 | 28 | 32 | 87 | 36 | 88 | 90 | 93 | - | |
2024.03 | 86 | - | - | - | - | - | - | - | - | - | - | - | - | 0 | - | 0 | 4 | 16 | - | - | - | |
2024.03 | 84 | - | - | - | - | - | - | - | - | - | - | - | 78 | 80 | 81 | 84 | 84 | 54 | 70 | 82 | - | |
2024.03 | 73 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 66 | - | - | - | |
2024.03 | 42 | - | - | - | - | - | - | - | - | - | - | - | - | 54 | - | 4 | 4 | 30 | - | - | - | |
2024.03 | 5 | - | - | - | - | - | - | - | - | - | - | - | 9 | 39 | 19 | 0 | 4 | 0 | 0 | 4 | - | |
2024.03 | 2 | - | - | - | - | - | - | - | - | - | - | - | - | 0 | - | 0 | 0 | 0 | - | - | - | |
2024.08 | - | 6 | 80 | 13 | 37 | 31 | 14.8 | 65 | 78 | 91 | 4 | 21.2 | 40.09 | - | - | - | - | - | - | - | - | |
2024.08 | - | 0 | 47 | 12 | 30 | 30 | 7 | 50 | 61 | 44 | 4 | 18.4 | 28.4 | - | - | - | - | - | - | - | - | |
2024.08 | - | 0 | 38 | 8 | 15 | 21 | 5.2 | 41 | 53 | 31 | 4 | 13.6 | 20.89 | - | - | - | - | - | - | - | - | |
2026.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2.5 | |
2026.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 1.5 | |
2026.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 5 | |
2026.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 3 | |
2026.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 27 | |
2026.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2.5 |