BenchmarkiFunctionary Swahili MiniUrdu (Pakistan) zadań

Functionary Swahili Mini

5 zadań

Każdy poniższy wiersz to jedno zadanie benchmarkowe, na którym oceniano ten model. Kolumna Wynik przedstawia średnią ze wszystkich metryk zadania (dokładność, F1, dokładne dopasowanie itp.). Kliknij wiersz, aby przejrzeć poszczególne pytania i odpowiedzi modelu.

Średnia

67.2

Wynik	Język	Zadanie	Metryki
83.8	Urdu (Pakistan)	urdu_facttool_qa urdu claim f1_macro: 83.8sample_len: 160.0	f1_macro: 83.8sample_len: 160.0
75.0	Urdu (Pakistan)	urdu_factcheckbench urdu claim f1_macro: 75.0sample_len: 387.0	f1_macro: 75.0sample_len: 387.0
73.9	Urdu (Pakistan)	urdu_bingcheck urdu claim f1_macro: 73.9sample_len: 102.0	f1_macro: 73.9sample_len: 102.0
72.8	Urdu (Pakistan)	urdu_fake_news urdu classification f1_macro: 72.8sample_len: 300.0	f1_macro: 72.8sample_len: 300.0
30.4	Urdu (Pakistan)	urdu_emotion_class urdu classification f1_macro: 30.4sample_len: 200.0	f1_macro: 30.4sample_len: 200.0