GPT-4.5: The Latest and Greatest?

Am Donnerstagabend hat OpenAI mit dem Release von GPT-4.5 begonnen, ihrem “bisher grössten und besten Modell für Chat.” Hier geht es zur offiziellen Mitteilung und zur System Card.

Für Plus-User soll GPT-4.5 nächste Woche ausgerollt werden, aber über die API ist es bereits uneingeschränkt verfügbar. Ich habe es mit einem privaten Eval Set von 34 Multiple-Choice-Fragen zum Leseverständnis bei deutschsprachigen Verwaltungsgerichtsentscheiden getestet.

GPT-4.5 übertrifft alle früheren OpenAI-Modelle. Die Leistungssteigerung ist jedoch eher marginal und entspricht den Verbesserungen, die schon bei früheren GPT-4-zu beobachten waren, und ist nicht vergleichbar mit dem Sprung von GPT-3.5 auf GPT-4 im März 2023. Ausserdem ist GPT-4.5 unglaublich teuer: Mit $150 pro Million Output-Tokens ist es 30-mal teurer als GPT-4o und 2,5-mal teurer als o1.

GPT-5 soll in den nächsten Monaten kommen. Dann werden wir sehen, ob die Scaling Laws definitiv ausgedient haben. Mehr erste Eindrücke zu GPT-4.5 gibt es bei Simon Willison.