Share your thoughts, 1 month free Claude Pro on usSee more

Social Signal Inference on EF dataset

0.618Provider Dominance

BERT

Updated 20d ago

Evaluation Results

Method	Links
BERT 2025.05		0.618	0.563	0.571	0.543	0.5	-	0.643	0.583	0.549	0.539	0.614	-	0.599	0.705	-	-	-	0.6	0.6	0.5	0.581	0.05
Ensemble 2025.05		0.603	0.624	0.558	0.609	0.628	0.488	0.484	0.587	0.589	0.564	0.554	0.464	0.575	0.599	0.664	0.901	0.659	0.65	0.681	0.644	0.606	0.09
FLAN-T5 2025.05		0.549	0.531	0.467	0.489	0.53	0.494	0.51	0.524	0.52	0.473	0.549	0.566	0.49	0.54	0.35	0.585	0.52	0.492	0.545	0.525	0.512	0.05
FLAN-T5 2025.05		0.539	0.52	0.469	0.489	0.532	0.499	0.519	0.516	0.518	0.477	0.548	0.57	0.499	0.544	0.358	0.457	0.527	0.498	0.55	0.515	0.507	0.04
LLaMA 2025.05		0.538	0.437	0.512	0.534	0.585	0.529	0.56	0.608	0.515	0.547	0.557	0.589	0.513	0.5	0.267	0.927	0.583	0.586	0.696	0.639	0.561	0.12
Gemma 2025.05		0.522	0.509	0.518	0.459	0.516	0.509	0.499	0.471	0.496	0.488	0.462	0.393	0.514	0.454	0.555	0.55	0.547	0.404	0.516	0.508	0.494	0.04
LLaMA 2025.05		0.507	0.463	0.517	0.513	0.61	0.542	0.53	0.601	0.516	0.577	0.553	0.456	0.496	0.492	0.551	0.857	0.685	0.514	0.624	0.568	0.559	0.09
Gemma 2025.05		0.502	0.489	0.481	0.483	0.579	0.532	0.512	0.491	0.476	0.51	0.513	0.483	0.413	0.442	0.446	0.125	0.465	0.489	0.469	0.549	0.473	0.09
LLaMA 2025.05		0.498	0.536	0.545	0.556	0.623	0.512	0.539	0.554	0.577	0.557	0.599	0.487	0.546	0.488	0.492	0.947	0.631	0.726	0.686	0.659	0.588	0.11
LLaMA 2025.05		0.495	0.523	0.511	0.564	0.629	0.495	0.542	0.568	0.576	0.582	0.595	0.575	0.495	0.48	0.448	0.734	0.612	0.608	0.711	0.633	0.569	0.07
Gemma 2025.05		0.478	0.523	0.506	0.5	0.489	0.552	0.512	0.5	0.536	0.505	0.48	0.491	0.529	0.515	0.568	0.562	0.362	0.379	0.461	0.441	0.494	0.05