Our new X account is live! Follow @wizwand_team for updates

Code Generation on HumanEval+

92.7Pass@1

GLM 4.6

Updated 4d ago

Evaluation Results

Method
GLM 4.6 2025.12	92.7	-	-	-	-	-	-	-	-	-	-
DeepSeek V3.2 2025.12	89	-	-	-	-	-	-	-	-	-	-
LongCat-Flash Chat 2025.12	88.4	-	-	-	-	-	-	-	-	-	-
LongCat-Flash Exp-Chat 2025.12	87.2	-	-	-	-	-	-	-	-	-	-
Qwen2.5-Coder-14B-Instruct 2025.12	87.2	-	-	-	-	-	-	-	-	-	-
Qwen2.5-Coder-32B-Instruct 2025.12	87.2	-	-	-	-	-	-	-	-	-	-
GPT-4o 2024.07	86	-	-	-	-	-	-	-	-	-	-
GPT-4o-2024-08-06 2025.12	86	-	-	-	-	-	-	-	-	-	-
Claude-3.5-Sonnet-20241022 2025.12	86	-	-	-	-	-	-	-	-	-	-
GPT-4o 2024.10	84.8	-	-	-	-	-	-	-	-	-	-
Kimi-K2 Base 2026.01	84.8	-	-	-	-	-	-	-	-	-	-
Qwen2.5-Coder-7B-Instruct 2025.12	84.1	-	-	-	-	-	-	-	-	-	-
GPT-4o 2024.10	82.9	-	-1.9	-	-	-	-	-	-	-	-
UCoder-32B 2025.12	82.9	-	-	-	-	-	-	-	-	-	-
SecCoderX 2026.02	82.74	90.85	-	-	-	-	-	-	-	-	-
Llama 3 405B 2024.07	82.3	-	-	-	-	-	-	-	-	-	-
Claude 3.5 Sonnet 2024.07	82.3	-	-	-	-	-	-	-	-	-	-
GPT-4o mini 2024.10	82.3	-	1.8	-	-	-	-	-	-	-	-
DS-Coder-V2-Instruct 2025.12	82.3	-	-	-	-	-	-	-	-	-	-
GPT-4-Turbo 2024.05	81.7	-	-	-	-	-	-	-	-	-	-
UCoder-14B 2025.12	81.1	-	-	-	-	-	-	-	-	-	-
GPT-4o mini 2024.10	80.5	-	-	-	-	-	-	-	-	-	-
DeepSeek-Coder V2 2024.10	80.5	-	-	-	-	-	-	-	-	-	-
Base 2026.02	79.88	92.68	-	-	-	-	-	-	-	-	-
Qwen-Long 2024.10	78.7	-	1.9	-	-	-	-	-	-	-	-
OpenCoder-8B-Instruct 2025.12	78.7	-	-	-	-	-	-	-	-	-	-
SecCoderX 2026.02	77.74	92.68	-	-	-	-	-	-	-	-	-
GPT-4 2024.07	77.4	-	-	-	-	-	-	-	-	-	-
Qwen-Long 2024.10	76.8	-	-	-	-	-	-	-	-	-	-
Codestral 2024.10	76.8	-	1.2	-	-	-	-	-	-	-	-
UCoder-7B 2025.12	76.8	-	-	-	-	-	-	-	-	-	-
DeepSeek-Coder V2 2024.10	76.2	-	-4.3	-	-	-	-	-	-	-	-
IF-CL-MC 2023.12	75.6	-	-	-	-	-	-	-	-	-	-
AlchemistCoder-DS 2024.05	75.6	-	-	-	-	-	-	-	-	-	-
Codestral 2024.10	75.6	-	-	-	-	-	-	-	-	-	-
DS-Coder-V2-Lite-Instruct 2025.12	75.6	-	-	-	-	-	-	-	-	-	-
DeepSeek-Coder-instruct 2023.12	75	-	-	-	-	-	-	-	-	-	-
DS-Coder-33B-Instruct 2025.12	75	-	-	-	-	-	-	-	-	-	-
Base 2026.02	75	90.85	-	-	-	-	-	-	-	-	-
Llama 3 70B 2024.07	74.4	-	-	-	-	-	-	-	-	-	-
WizardCoder-V1.1 2023.12	73.2	-	-	-	-	-	-	-	-	-	-
IF-CL-MC 2023.12	72.6	-	-	-	-	-	-	-	-	-	-
Llama3.1 2024.10	72.6	-	0.6	-	-	-	-	-	-	-	-
NonDPFT 2025.12	72.6	-	-	-	-	-	-	100	72.6	-	-
NonDPFT 2025.12	72.6	-	-	-	-	-	-	-	-	-	-
MPSC 2023.09	72.18	-	-	81.22	-	-	-	-	-	-	75.2
Llama3.1 2024.10	72	-	-	-	-	-	-	-	-	-	-
IF-CL-MC 2023.12	71.3	-	-	-	-	-	-	-	-	-	-
DS-Coder-6.7B-Instruct 2025.12	71.3	-	-	-	-	-	-	-	-	-	-
MiMo-V2-Flash Base 2026.01	70.7	-	-	-	-	-	-	-	-	-	-
GPT-4 2023.09	70.52	-	-	79.54	-	-	-	-	-	-	75.48
DeepSeek-Coder-Instruct 2024.05	69.5	-	-	-	-	-	-	-	-	-	-
ProSec 2026.02	68.84	81.71	-	-	-	-	-	-	-	-	-
Mixtral 8x22B 2024.07	68.3	-	-	-	-	-	-	-	-	-	-
AlchemistCoder-CL 2024.05	68.3	-	-	-	-	-	-	-	-	-	-
DeepSeek-Coder-Instruct 2024.05	67.7	-	-	-	-	-	-	-	-	-	-
DeepSeek-V3.2 Exp Base 2026.01	67.7	-	-	-	-	-	-	-	-	-	-
Llama 3 8B 2024.07	67.1	-	-	-	-	-	-	-	-	-	-
MagicoderS-CLP 2023.12	66.5	-	-	-	-	-	-	-	-	-	-
GPT-3.5-Turbo 2024.05	65.9	-	-	-	-	-	-	-	-	-	-
MagicoderS-DS 2024.05	65.2	-	-	-	-	-	-	-	-	-	-
DeepSeek-V3.1 Base 2026.01	64.6	-	-	-	-	-	-	-	-	-	-
Nemotron 4 340B 2024.07	64	-	-	-	-	-	-	-	-	-	-
GPT-3.5 Turbo 2024.07	62.8	-	-	-	-	-	-	-	-	-	-
Temporal Guidance 2026.01	62.8	-	-	-	-	-	-	-	-	-	-
SafeCoder 2026.02	62.07	89.63	-	-	-	-	-	-	-	-	-
DoLa 2026.01	61.59	-	-	-	-	-	-	-	-	-	-
PrivCode 2025.12	61	-	-	-	-	-	-	100	61	-	-
PrivCode 2025.12	61	-	-	-	-	-	-	-	-	-	-
Contrastive Decoding 2026.01	60.98	-	-	-	-	-	-	-	-	-	-
DoLa 2026.01	60.98	-	-	-	-	-	-	-	-	-	-
MagicoderS-CL 2024.05	60.4	-	-	-	-	-	-	-	-	-	-
Starcoder2-15B-Instruct-v0.1 2025.12	60.4	-	-	-	-	-	-	-	-	-	-
Qwen2.5-Coder-32B 2025.12	60.4	-	-	-	-	-	-	-	-	-	-
Temporal Guidance 2026.01	60.37	-	-	-	-	-	-	-	-	-	-
Temporal Guidance 2026.01	60.37	-	-	-	-	-	-	-	-	-	-
Temporal Guidance 2026.01	59.76	-	-	-	-	-	-	-	-	-	-
Temporal Guidance 2026.01	59.76	-	-	-	-	-	-	-	-	-	-
ProSec 2026.02	59.51	77.44	-	-	-	-	-	-	-	-	-
GPT-3.5-Turbo 2023.09	58.75	-	-	73.96	-	-	-	-	-	-	66.58
Baseline (Greedy) 2026.01	58.54	-	-	-	-	-	-	-	-	-	-
CodeLlama-Instruct 2024.05	58.5	-	-	-	-	-	-	-	-	-	-
Contrastive Decoding 2026.01	57.92	-	-	-	-	-	-	-	-	-	-
Qwen2.5-Coder-14B 2025.12	57.9	-	-	-	-	-	-	-	-	-	-
CoRAG 2026.02	57.43	79.26	-	-	-	-	-	-	-	-	-
WizardCoder-CL 2024.05	56.7	-	-	-	-	-	-	-	-	-	-
NonDPFT 2025.12	56.7	-	-	-	-	-	-	-	-	-	-
LEDEX RL 2024.05	56.68	80.89	-	-	-	-	-	-	-	-	-
Llama3 2026.02	56.58	77.43	-	-	-	-	-	-	-	-	-
LEDEX RL 2024.05	56.57	81.77	-	-	-	-	-	-	-	-	-
JFT 2025.12	56.3	-	-	-	-	-	-	97	57.9	-	-
JFT 2025.12	56.3	-	-	-	-	-	-	-	-	-	-
Magicoder-DS 2024.05	55.5	-	-	-	-	-	-	-	-	-	-
DP-Adapter 2025.12	55.5	-	-	-	-	-	-	95.7	58	-	-
DP-Adapter 2025.12	55.5	-	-	-	-	-	-	-	-	-	-
NonDPFT 2025.12	54.9	-	-	-	-	-	-	-	-	-	-
SafeCoder 2026.02	54.33	83.54	-	-	-	-	-	-	-	-	-
DPFT 2025.12	53.7	-	-	-	-	-	-	95.1	56.4	-	-
DPFT 2025.12	53.7	-	-	-	-	-	-	-	-	-	-
Qwen2.5-Coder-7B 2025.12	53	-	-	-	-	-	-	-	-	-	-

Showing 100 of 363 rows