Две настройки API утроили результат на ARC-AGI-3

GPT-5.6 Sol с трудом проходила ARC-AGI-3, набор двумерных игр-головоломок, хотя ту же модель применяли для решения открытых задач в математике. Причина оказалась в обвязке для запуска: она не давала модели помнить то, что та уже выучила, объясняет OpenAI.

После включения двух настроек API результат вырос втрое при вшестеро меньшем расходе выходных токенов. Это сохранение рассуждений между шагами и сжатие контекста (compaction), которые вместе дают долгоживущему агенту опираться на прошлый опыт. Разработчикам OpenAI советует те же настройки, что использует в своих продуктах, и переход с устаревшего Chat Completions на Responses API. Публичные игры ARC-AGI-3 доступны для самостоятельного прохождения на сайте ARC Prize.