BenchmarkiFunctionary Swahili LargeAlbanian (Albania) zadań

Functionary Swahili Large

3 zadań

Każdy poniższy wiersz to jedno zadanie benchmarkowe, na którym oceniano ten model. Kolumna Wynik przedstawia średnią ze wszystkich metryk zadania (dokładność, F1, dokładne dopasowanie itp.). Kliknij wiersz, aby przejrzeć poszczególne pytania i odpowiedzi modelu.

Średnia

85.8

Wynik	Język	Zadanie	Metryki
92.2	Albanian (Albania)	albanian_belebele albanian mcq f1_macro: 92.2sample_len: 900.0	f1_macro: 92.2sample_len: 900.0
83.2	Albanian (Albania)	albanian_global_mmlu albanian mcq f1_macro: 83.2sample_len: 400.0	f1_macro: 83.2sample_len: 400.0
82.1	Albanian (Albania)	albanian_sib200 albanian classification f1_macro: 82.1sample_len: 204.0	f1_macro: 82.1sample_len: 204.0