Wie das Aktivieren von zwei Einstellungen unsere Punktzahlen im ARC-AGI-3-Benchmark verdreifacht hat
OpenAI
OpenAI hat festgestellt, dass das Aktivieren von zwei einfachen API-Einstellungen bei GPT-5.6 seine Leistung im ARC-AGI-3-Benchmark verdreifacht hat. Die Einstellungen, Reasoning-Retention und Kompaktierung, verbesserten sowohl die Punktzahlen als auch die Effizienz.
OpenAI berichtete, dass die Aktivierung von zwei API-Einstellungen bei GPT-5.6 die Leistung im ARC-AGI-3-Benchmark dramatisch verbesserte. Bei den Einstellungen handelt es sich um Reasoning Retention (Beibehaltung von Denkschritten) und Compaction (Kompaktierung der Ausgabe). Durch das Beibehalten der Denkschritte und die Kompaktierung der Ausgabe erzielte das Modell dreimal höhere Ergebnisse als zuvor, während gleichzeitig die Effizienz gesteigert wurde. Die Entdeckung deutet darauf hin, dass einfache Konfigurationsänderungen erhebliche Leistungssteigerungen freisetzen können, ohne das Modell selbst zu verändern.
Quelle: OpenAI —
Original