openai

Счёт срезала только смена модели, а не сжатие контекста

Promtime

openai

Шесть режимов экономии токенов сравнили с базовой линией 5.6 Sol на десяти задачах из репозитория Stet, каждую конфигурацию прогнали дважды, всего 140 запусков агента в Codex CLI. Суммарные токены не упали в обоих прогонах ни у одного режима, сообщил разработчик Stet.

Context Mode добавил к базовой линии 94% и 46% токенов, вариант с промптами на китайском 86% и 15%. У Caveman, RTK и Ponytail знак менялся между прогонами. Caveman в первом добавил 7% токенов, во втором убрал 11%.

Повторяемо упала только стоимость при смене модели на более дешёвую 5.6 Terra xhigh, примерно на 49% в обоих прогонах, причём токенов она израсходовала на 6% и 5% больше.

Сама базовая линия дала разброс 30%: $6,93 за задачу в первом прогоне и $9,00 во втором при тех же задачах и настройках.

Комментарии

Пока никто не написал. Будьте первым.

Присоединяйтесь к разговору

Войдите через Google, чтобы оставить комментарий. Имя и аватар подставятся из вашего профиля Google, а комментарий появится после модерации.

Из Google мы используем только имя и аватар. Почту не сохраняем.