Перейти к содержанию

OpenAI

Память ChatGPT о работе на Mac обходится без скриншотов

3 мин чтения

Текст написан ИИ-моделью по источникам, на которые ведут ссылки, и сверен с ними второй моделью. Как мы работаем

Всё о теме: OpenAI: модели и продукты →
Видео: threads.com

Computer History, новая функция ChatGPT Work и Codex на macOS, с 13 августа запоминает, чем пользователь занимался в приложениях и на сайтах, и при этом не делает снимков экрана. Вместо скриншотов она записывает клики, ввод текста и переключения между приложениями и собирает из них память и таймлайн. Функция доступна на тарифах Pro, Business и Enterprise.

Как описывает The New Stack, ChatGPT должен отвечать на вопросы вроде «что я вчера отлаживал?» или «на чём я остановился с тем PR?» без пересказа контекста. По истории действий он находит нужные файлы, документы и переписку, где бы они ни лежали: в Google Docs, в Slack или в открытой вкладке браузера. Так же можно найти текст, который вы точно читали, но не помните, где.

Доминик Кундель из OpenAI в ролике с анонсом объясняет, что именно собирает система: «Computer History не опирается на запись экрана или звука. Вместо этого она фиксирует события взаимодействия: клики, ввод текста, переключения между приложениями и другое. Так память собирается быстрее и эффективнее».

Чем она отличается от Chronicle

В Testing Catalog Computer History описывают как обновление Chronicle. Этот исследовательский эксперимент OpenAI выпустила 20 апреля в приложении Codex для macOS, и цель у него была та же. Но Chronicle строил таймлайн по снимкам экрана и распознаванию текста на них (OCR). Отобранные кадры уходили во временную сессию Codex на серверах OpenAI, где из них извлекались сводки увиденного, текст, пути к файлам и метки времени. Для работы требовались разрешения Screen Recording и Accessibility.

Сама OpenAI тогда предупреждала, что снимки экрана могут содержать конфиденциальные данные, что Chronicle быстро расходует лимиты запросов и повышает риск промпт-инъекций: инструкций, спрятанных в контенте на экране в расчёте на то, что модель их выполнит. Как сообщала Help Net Security, компания обещала не хранить снимки на серверах после обработки (кроме случаев, когда этого требует закон) и не обучать на них модели, а сами воспоминания могли идти на улучшение моделей в зависимости от настроек. В Computer History уходит как раз та часть Chronicle, о рисках которой OpenAI предупреждала сама.

От Record & Replay новинка тоже отличается: та функция ChatGPT и Codex превращает показанный пользователем сценарий в переиспользуемый навык.

Кто управляет записью

В строке меню macOS появился пункт, через который из отслеживания можно исключить любое приложение и там же поставить запись на паузу. В десктопном приложении ChatGPT есть отдельная настройка для исключения приложений и сайтов. По умолчанию функция выключена.

Данные хранятся локально, поэтому можно посмотреть, что именно система записала, и удалить лишнее из таймлайна. Однако модель всё равно получает сводки, и в The New Stack считают, что этого может хватить, чтобы многие пользователи и их работодатели оставили функцию выключенной.

Круг пользователей шире, чем у Chronicle. Тот на старте был доступен только подписчикам ChatGPT Pro на macOS и не работал в ЕС, Великобритании и Швейцарии. Computer History раскатывают глобально сразу на Pro, Business и Enterprise, а пользователи в ЕЭЗ, Великобритании и Швейцарии получат доступ «в ближайшие недели».

Кундель описывает следующий шаг так: «Когда агенты понимают, что вы делаете и как работаете, меняется то, как с ними можно взаимодействовать». По его словам, агента можно попросить сделать навык из того, что вы только что сделали, или каждое утро запускать автоматизацию, которая готовит черновик стендап-апдейта для команды.

ClaudeClaude Code

Форк субагентов включили по умолчанию

Набираешь @ в Claude Code и упоминаешь другую свою сессию по имени, сообщение уходит ей напрямую через SendMessage. Чтобы адресат не путался, живые сессии на одной машине получают уникальные имена.

Пока никто не написал. Будьте первым.

Присоединяйтесь к разговору

Войдите, чтобы оставить комментарий. Он появится после модерации.