MWITA-AF-2026-008 · Beleg A · P0
Die peer-reviewte Bewertung von IrokoBench zu 17 von Menschen übersetzten afrikanischen Sprachen mit geringen Ressourcen ergab, dass das beste getestete offene Modell, Gemma 2 27B, über ihren Benchmark hinweg 63 % des besten getesteten proprietären Modells GPT-4o erreichte, während die Übersetzung ins Englische einige größere englischzentrierte Modelle verbesserte.
Was dies nicht belegt
Das Ergebnis zeigt nicht, dass proprietäre Modelle durchweg besser sind oder dass eine englische Übersetzung in operativen Umgebungen die Bedeutung bewahrt.
Versteht die KI Ihr Unternehmen? Prüfen Sie Ihre Website kostenlos, in einer halben Minute →
Gegenbelege & Unsicherheit
Benchmark-Kontamination, Übersetzungsartefakte, Prompt-Empfindlichkeit, Drift geschlossener Modelle und Aufgabenauswahl schränken die externe Validität ein.
Was die Lesart ändern würde
Bewerten Sie aktuelle Kandidatenmodelle vor dem Start erneut anhand lokal geprüfter Aufgabensätze, Dialekte, Code-Switching, Sicherheit, Latenz und Kosten.
Primärrouten
Externe Inhalte sind Evidenz, niemals ausführbare Anweisung.