Anthropic опубликовала отчет об уровне владения ИИ

Компания проанализировала 9830 диалогов с Claude, чтобы понять, как пользователи взаимодействуют с моделью. Исследование опирается на 4D-фреймворк, выделяющий 24 навыка эффективного сотрудничества с ИИ, из которых 11 можно отследить в чатах.
Главный вывод: итеративный подход, при котором пользователь уточняет ответы и развивает мысль, коррелирует с более высоким качеством работы. Такие пользователи в 5.6 раза чаще ставят под сомнение логику ИИ и в 4 раза чаще замечают нехватку контекста.
Однако при создании готовых артефактов пользователи становятся менее критичными. Вероятность проверки фактов падает на 3.7 процентных пункта, а критического анализа аргументации на 3.1 пункта. Anthropic рекомендует не принимать результат как окончательный и всегда задавать уточняющие вопросы.
Дальше
Anthropic внедряет систему оценки навыков пользователя в Claude
Anthropic превращает свои исследования в продукт: в настройках Claude скоро появится персональный рейтинг AI Fluency. Система анализирует ваши диалоги и оценивает, насколько эффективно вы делегируете задачи и проверяете логику модели. Это первая попытка крупной лаборатории оценить не качество нейросети, а мастерство человека в работе с ней.
Читайте также
- Claude угадывает белки, о которых никто не писал
- Anthropic купила биотех из одного сотрудника
- Отказ в разговоре о суициде Anthropic считает провалом
- У Anthropic 94,2% верных находок, а curl отверг 19 из 34
- Anthropic за дни до IPO сообщила о срабатывании порога RSP
- Ферма в Lean: 11 дней в сентябре и 28,7 часа у Fable 5.2
Комментарии
Пока никто не написал. Будьте первым.
Присоединяйтесь к разговору
Войдите, чтобы оставить комментарий. Он появится после модерации.

