Benchmarks · Portrait

MMLU-Pro

Prüft akademisches Wissen und Reasoning über mehrere Fachgebiete.

Quellen geprüft am 19. Oktober 2026 · Redaktion: Philipp Paulik

Technische Einordnung

MMLU-Pro erweitert den ursprünglichen MMLU-Ansatz um schwierigere, reasoning-orientierte Aufgaben und mehr Antwortoptionen. Das Originalrepository umfasst Auswertungscode und Methodik.

Messgröße

Overall Accuracy; Fachgebietsauswertung und Prompting dokumentieren.

Grenzen & richtig lesen

MMLU, MMLU-Pro und MMLU-ProX sind verschiedene Tests. Zahlen aus diesen Tests dürfen nicht in eine Rangliste zusammengeschoben werden.

Benchmark-Belege

Für dieses Portrait ist noch kein ausreichend zugeordnetes Ergebnis erfasst. Fehlende Werte sind keine Null. Wir übernehmen keine Werte aus ähnlich benannten Modell- oder Benchmark-Versionen.