Перейти к содержанию

Anthropic

Anthropic опубликовала отчет об уровне владения ИИ

Текст написан ИИ-моделью по источникам, на которые ведут ссылки, и сверен с ними второй моделью. Как мы работаем

Изображение: anthropic.com

Компания проанализировала 9830 диалогов с Claude, чтобы понять, как пользователи взаимодействуют с моделью. Исследование опирается на 4D-фреймворк, выделяющий 24 навыка эффективного сотрудничества с ИИ, из которых 11 можно отследить в чатах.

Главный вывод: итеративный подход, при котором пользователь уточняет ответы и развивает мысль, коррелирует с более высоким качеством работы. Такие пользователи в 5.6 раза чаще ставят под сомнение логику ИИ и в 4 раза чаще замечают нехватку контекста.

Однако при создании готовых артефактов пользователи становятся менее критичными. Вероятность проверки фактов падает на 3.7 процентных пункта, а критического анализа аргументации на 3.1 пункта. Anthropic рекомендует не принимать результат как окончательный и всегда задавать уточняющие вопросы.

AI-индустрияAnthropic

Anthropic внедряет систему оценки навыков пользователя в Claude

Anthropic превращает свои исследования в продукт: в настройках Claude скоро появится персональный рейтинг AI Fluency. Система анализирует ваши диалоги и оценивает, насколько эффективно вы делегируете задачи и проверяете логику модели. Это первая попытка крупной лаборатории оценить не качество нейросети, а мастерство человека в работе с ней.

Пока никто не написал. Будьте первым.

Присоединяйтесь к разговору

Войдите, чтобы оставить комментарий. Он появится после модерации.