Vergleich der Leistung ausgewählter KI-Modelle mit menschlichen Fähigkeiten 2024

Eine KI-Benchmark ist ein standardisierter Test, der dazu dient, die Leistung und die Fähigkeiten von KI-Systemen bei bestimmten Aufgaben zu bewerten. Dabei handelt es, sich um eine Standardmethode, die ermöglicht den Fortschritt von KI-Systemen zu überwachen. 

Die Quelle gibt an, dass die Werte skaliert wurden, um eine Standardmetrik für den Vergleich verschiedener Benchmarks zu erhalten. Die Skalierungsfunktion ist so kalibriert, dass die Leistung des besten Modells für jedes Jahr als Prozentsatz der menschlichen Basisleistung für eine bestimmte Aufgabe gemessen wird. Ein Wert von 1,05 Prozent bedeutet zum Beispiel, dass ein Modell 5 Prozent besser abschneidet als die Human-Baseline.