Share your thoughts, 1 month free Claude Pro on usSee more

Image Watermarking Evaluation on MS-COCO 2014 (val)

0.933DwtDct PLCC

WMVLM

Updated 5mo ago

Evaluation Results

Method	Links
WMVLM 2026.01		0.933	0.922	0.994	0.781	0.803	0.994	0.641	0.625	0.99	0.964	0.971	0.982	0.977	0.977	0.995	0.952	0.964	0.984	0.746	0.746	0.954	0.954	0.904	0.904
Qwen3-VL-8B 2026.01		0.198	0.421	0.004	0.032	0.058	0.008	-0.026	0.055	0.019	0.91	0.933	0.002	0.475	0.168	0.015	-0.491	-0.343	0.065	0.01	0.01	0	0	0.992	0.992
Qwen3-VL-32B 2026.01		0.114	0.062	0	-0.307	-0.447	0.026	0.136	0.171	0.246	0.154	0.124	0.03	-0.019	-0.016	0.081	0.002	0.009	0.35	0.012	0.026	0.008	0.004	0.912	0.91
Gemma-3-12B 2026.01		0.111	0.037	0.041	-0.14	-0.08	0.128	-0.042	0.031	0.204	-0.018	-0.061	0.072	0.092	0.038	0.094	0.211	0.221	0.317	0.02	0.02	0.658	0.658	0.206	0.208
Gemma-3-27B 2026.01		0.083	0.056	0.215	-0.016	-0.0204	0.432	0.055	0.083	0.566	0.08	0.036	0.424	0.127	0.112	0.397	0.195	0.183	0.588	0.02	0.022	0.34	0.338	0.024	0.024
Gemma-3-4B 2026.01		0.043	0.007	0.018	0.06	-0.1	0.213	-0.085	-0.13	0.313	-0.098	-0.092	0.205	0.185	0.171	0.244	0.095	0.091	0.343	0	0	0.078	0.078	0.336	0.406
Gemini-3-Pro 2026.01		0.007	-0.017	0.002	-0.022	-0.063	0.434	0.001	-0.002	0.882	0.03	-0.007	0.318	0.016	0.035	0.662	0.162	0.144	0.888	0.026	0.026	0.006	0.006	0.79	0.79
Claude-Opus-4.5 2026.01		-0.06	0.044	0.109	-0.009	-0.05	0.173	0.06	0.038	0.252	-0.072	-0.101	0.105	0.201	0.224	0.175	0.351	0.299	0.435	0.002	0.026	0.226	0.208	0.584	0.588
GPT-5 2026.01		-0.089	-0.065	0	0	0.056	0.834	0.081	0.058	0.921	0.011	0.006	0.723	-0.04	-0.052	-	0.672	0.002	0.952	0.038	0.038	0	0	0.424	0.424
LLaVA-v1.6-7B 2026.01		-0.255	-0.605	0	-0.277	-0.088	0	0.265	0.328	0	0.568	0.444	0	0.356	0.435	0	0.161	0.006	0	0	0.004	0	0.008	0.014	0.016
Qwen3-VL-4B 2026.01		-0.305	-0.2	0.002	0.392	0.415	0.002	0.245	0.261	0.026	-0.98	-0.992	0.006	0.157	0.215	0.037	0.125	0.184	0.093	0.004	0.004	0	0	0.956	0.956
LLaVA-v1.6-13B 2026.01		-0.316	-0.244	0	0.138	0.236	0.012	0.033	0.015	0.006	0.116	0.123	0.009	-0.018	-0.038	0.007	-0.021	-0.047	0.014	0	0	0	0.006	0.18	0.176