Claude Code и две бесплатные модели не сошлись на Next.js

Табло Whatagentspick, обновлённое 27 октября, сравнивает, что ставят в проект Claude Code и две бесплатные модели в OpenCode, DeepSeek V4.1 Flash и GLM 5.3 Flash, на одинаковых промптах. Главный выбор у них совпал в двух категориях из трёх на Python и ни в одной на Next.js. Хостинг и почтовый сервис, если их выбирает агент, определяет стек: Heroku у всех трёх моделей набрал 14 прогонов из 30 на Python и ни одного из 29 на Next.js, Resend набрал 16 из 30 на Next.js и ни одного из 29 на Python.

Привязку выбора к проекту у Claude Code уже наблюдали. В исследовании Amplifying на 2 430 открытых промптах без названий инструментов (модели Sonnet 4.5, Opus 4.5 и Opus 4.6) одна и та же категория давала разные инструменты в разных репозиториях, при этом от формулировки промпта выбор зависел слабо: в среднем он совпадал в 76% случаев при пяти разных формулировках. Деплой там уходил в Vercel для Next.js и в Railway для Python, а в новом табло на этих стеках лидируют plain Docker и Heroku.

Сравнивают три категории (ORM, деплой и отправку почты) на двух стеках: Next.js с TypeScript и Python с FastAPI. Выборки у бесплатных моделей маленькие, и автор табло сам просит считать их наводкой.

Что выбирают на Python

SQLAlchemy взяли все: Claude в 18 прогонах из 18, DeepSeek в 6 из 6, GLM в 4 из 5. С почтой так же единодушно. Письма отправляли через голый SMTP, своим кодом без стороннего почтового API: Claude в 17 случаях из 18, DeepSeek в 5 из 5, GLM в 5 из 6, вместе 27 из 29.

Разошлись модели только на деплое. DeepSeek чаще ставил Heroku (3 из 6), GLM тоже (4 из 6), а у Claude Heroku и plain Docker поделили первое место, по 7 прогонов из 18.

Ничьи на Next.js

Drizzle на Next.js выбрали Claude в 12 прогонах из 18 (у Opus 5.5, Sonnet 5.5 и Haiku 5.5 по 4 из 6) и GLM в 5 из 6. У DeepSeek Drizzle и Prisma набрали поровну, по 2 из 6, и табло записывает категорию в расхождения.

Plain Docker стоит в верхней строке деплоя у всех трёх моделей, но совпадением это тоже не считается. Claude выбирал его в 14 прогонах из 18, а Haiku 5.5 во всех шести. У DeepSeek он делит первое место с Fly.io, по 2 из 5, у GLM с самодельным решением, по 3 из 6.

С почтой расхождение настоящее. Claude в 11 прогонах из 18 подключал сторонний сервис Resend, GLM в 4 из 6 оставался на голом SMTP, у DeepSeek оба варианта набрали по 3 из 6.

18 прогонов против шести

У Claude на каждую пару категории и стека 18 прогонов, по шесть на Opus 5.5, Sonnet 5.5 и Haiku 5.5. Засчитаны все 108, и обошлись они в 11,21 доллара. DeepSeek и GLM гоняли на бесплатном тарифе OpenCode, всего по шесть прогонов на ячейку. В 3 из 72 бесплатных прогонов модель не сделала ни одной попытки, такие прогоны исключили, отсюда знаменатели 5 и 29 в отдельных ячейках.

Claude и бесплатные модели к тому же работают в разных обвязках: Claude в Claude Code, остальные в OpenCode. Поэтому разница между колонками, вероятно, относится к связке модели и агента целиком.

Промпты, стартовые проекты и детектор выбора у всех одинаковые, а сырые прогоны выложены на GitHub, так что любую ячейку можно пересчитать самому.