Перейти к содержанию

Anthropic

Claude две недели ломал Claude Docs перед запуском

3 мин чтения

Текст написан ИИ-моделью по источникам, на которые ведут ссылки, и сверен с ними второй моделью. Как мы работаем

Всё о теме: Claude Code: версии и изменения →
Изображение: claude.dev

Инженер Anthropic рассказал в блоге Claude, как сервис Claude Docs, редактор документов внутри Claude, готовили к запуску. За две недели до открытия он оставил Claude круглосуточно ломать тестовую копию сервиса. Модель нагружала её, нарочно выводила из строя ключевые части, читала телеметрию и сама выкатывала исправления, а решения, которые трудно отменить, отдавала человеку. Docs открылись 16 сентября, к 22 сентября пользователи создали больше 4,6 миллиона документов, и на 2 миллиарда запросов пришлось всего 60 серверных ошибок.

За три недели до запуска сервис работал на одной машине, и им пользовались несколько тысяч сотрудников Anthropic. Команда сама ждала миллионы документов в первые же дни, а понять по внутренним пользователям, выдержит ли сервис такую нагрузку, было нельзя.

Как устроен цикл

4 сентября автор запустил в Claude Code сессию, которая гоняла через тестовый кластер, копию боевого, больше миллиона искусственных документов в день. Шаги каждый раз одни и те же: выбрать сценарий, дать нагрузку, прочитать телеметрию, предложить исправление, выкатить его на тестовый стенд и начать заново. Основную работу сессия раздавала субагентам, в самую загруженную неделю обычно около 11 одновременно. Сценарии автор, по его словам, выбирал параноидальные: 10 миллионов новых документов за день, 22 000 соединений, которые переподключаются разом, сервер, убитый посреди загрузки документа.

Заранее он перечислил, что Claude нельзя менять без спроса: всё, что трудно откатить, например схему базы данных или способ хранения документа. В таких местах модель останавливалась и приходила с рекомендацией. Ещё два правила действовали всё время: документы должны открываться почти мгновенно, а правка, которую сервер принял, не должна потеряться.

На запуске это окупилось. Семь из десяти отрепетированных сценариев действительно случились в боевой системе, но исправления к тому времени уже были выкачены и прятались за переключателями, так что команде обычно хватало просто их включить. За сентябрь сервис обновляли 629 раз и ни разу не откатывали.

Память и Rust

Лучший пример работы цикла связан с памятью. В начале испытаний один большой документ занимал около 3 ГБ. Первая догадка Claude, урезать кэш, не подтвердилась на следующем прогоне, и модель от неё отказалась. Дальше она сужала поиск и нашла, что каждое нажатие клавиши копировало документ в несколько разных структур данных, добавляя по нескольку мегабайт. Claude переделал их так, чтобы они пользовались одной общей копией. Через три дня документ занимал около 180 МБ, а оценка того, сколько серверов нужно для запуска, упала с более чем 500 до примерно 50.

Найти такое помог выбор языка. Сервис написали на Rust, где нет сборщика мусора, то есть механизма, который сам освобождает память по своему расписанию. Без него вся память документа лежит в структурах, написанных командой, и любую цифру можно связать с конкретным кодом. Зависимостей взяли минимум. Rust людям писать трудно, но Claude пишет на нём нормально, замечает автор. С Go, который в Anthropic тоже используют, языки специально не сравнивали.

Почему только сейчас

По словам автора, ещё несколько месяцев назад так бы не вышло. Прежние модели через десять-двадцать итераций начинали забывать, ради чего всё делается, и цель приходилось повторять. Он работал с внутренней исследовательской моделью, примерно сравнимой с Claude Fable 5.2, и она держала все правила две недели, ни разу не потребовав напоминания.

Сколько это стоило

По прейскуранту API для Claude Fable 5.2 на ноябрь 2026 года инференс с конца августа до дня запуска обошёлся примерно в 125 000 долларов. Автор считает, что пару лет назад такая работа заняла бы у команды инженеров около полугода, и что теперь, зная процесс, можно было потратить примерно вдвое меньше.

Для небольшого сервиса из пары узлов Kubernetes и базы Postgres он прикидывает двухнедельный цикл в 3 000-10 000 долларов, но оговаривается, что сам этого не запускал. Совет для желающих: дать Claude доступ к телеметрии, попросить скрипт, который бьёт по тестовой копии нагрузкой в десять раз выше реальной и нарочно ломает её части, заранее записать главные технические правила и требовать, чтобы перед необратимыми шагами модель останавливалась и предлагала варианты.

AI-индустрияАгенты и MCP

Telegram готовит ИИ-агента Dictator для Mac, Видео

Telegram готовит для Mac ИИ-агента по имени Dictator, пишет TestingCatalog. Ему можно будет разрешить читать, отправлять и удалять ваши сообщения, а секретные чаты и коды входа останутся под запретом. Разрешили бы агенту отправлять сообщения от вашего имени или только читать?

Пока никто не написал. Будьте первым.

Присоединяйтесь к разговору

Войдите, чтобы оставить комментарий. Он появится после модерации.