Share your thoughts, 1 month free Claude Pro on usSee more

Machine Translation on Flores focus languages

19am

Tiny Aya Global

Updated 1mo ago

Evaluation Results

Method	Links
Tiny Aya Global 2026.03		19	52	60	31	58	54	58	59	59	48	53	50	36	48	43	66	47	55	44	31	50	50	49	41	67	25	54	24	22	32	29	35	46	48	38	39	16	52	18	53	56	42	45	63	57	54	53	51	25	32	61	54	37	41	31	56	51	52	39	59	11	31	13	21	20	35	43	14
Tiny Aya Earth 2026.03		16	53	60	21	58	56	59	64	60	50	53	51	39	49	45	64	50	55	43	39	53	52	53	37	66	26	56	22	9	19	22	8	45	49	37	38	16	52	4	54	56	40	45	64	59	54	53	52	28	29	63	55	26	35	27	50	54	54	38	59	11	29	15	25	19	35	42	17
TranslateGemma 4B 2026.03		16	52	59	46	60	53	26	64	61	49	56	49	40	48	54	66	19	58	47	11	50	51	53	48	66	6	58	37	38	22	32	26	49	48	28	46	61	36	33	55	57	1	49	65	59	54	51	49	8	47	64	48	53	52	51	57	54	53	40	55	6	4	3	33	18	3	43	18
Tiny Aya Fire 2026.03		7	48	59	32	60	55	58	61	57	49	53	44	34	48	47	66	45	54	44	32	52	51	53	34	67	15	56	23	15	26	29	20	48	50	37	36	9	53	7	51	55	42	46	66	58	53	53	51	17	49	61	53	30	41	28	56	47	51	41	57	5	22	7	26	19	26	42	17
Qwen3.5-4B 2026.03		5	49	57	34	61	51	26	61	60	44	54	39	23	47	44	66	16	55	27	9	39	43	49	46	66	4	56	29	18	18	30	20	42	43	3	31	61	26	11	53	54	27	44	67	58	53	46	41	1	3	61	13	28	29	43	41	48	50	32	57	1	6	3	30	25	6	36	19
Tiny Aya Water 2026.03		3	53	61	19	61	56	61	64	60	49	53	48	36	49	45	64	49	56	42	28	54	49	52	43	67	9	56	27	18	32	32	35	44	51	37	35	24	55	22	51	57	38	47	64	59	54	54	52	14	34	61	49	31	41	31	55	54	54	41	60	6	19	9	27	22	25	43	16
Gemma3-4B 2026.03		1	50	60	42	57	49	14	65	60	48	53	38	23	49	49	64	15	52	44	11	46	51	47	41	67	6	56	31	12	10	32	12	41	45	6	42	60	34	2	53	57	16	47	68	60	54	46	41	4	20	64	38	47	49	43	58	51	53	29	57	1	8	4	26	20	9	38	20
Ministral-3-3B 2026.03		1	38	48	31	55	48	23	56	54	41	51	29	26	40	43	62	20	50	25	2	35	40	44	39	58	1	50	25	26	3	24	2	33	32	5	21	51	7	8	49	51	22	43	63	53	49	39	38	1	43	57	9	28	24	33	39	43	46	27	51	1	1	1	23	20	1	32	19
Qwen3-4B 2026.03		0	42	48	30	55	44	5	54	57	36	52	17	7	36	34	63	3	51	24	1	32	37	41	38	63	1	52	27	21	16	27	11	31	33	2	18	53	3	10	49	47	20	41	64	53	51	38	33	1	36	54	4	20	19	40	42	41	43	23	55	0	2	1	28	23	2	30	19
SmolLM3-3B 2026.03		0	44	22	2	38	16	1	30	58	36	52	3	1	12	5	63	1	41	2	0	7	32	11	3	38	0	53	24	17	1	20	1	2	3	1	3	29	2	1	35	27	1	22	62	32	48	10	7	0	1	28	1	2	2	31	7	11	28	2	42	1	0	0	22	15	0	17	18