Память ChatGPT о работе на Mac обходится без скриншотов

OpenAI добавила в ChatGPT Work и Codex на macOS функцию Computer History: с разрешения пользователя она фиксирует действия в приложениях и на сайтах и собирает из них память и хронологию, не делая скриншотов. Как пишет Thenewstack, функция необязательная и предназначена для тарифов Pro, Business и Enterprise.

Коротко

• Вместо захвата экрана и звука система записывает события взаимодействия: клики, ввод текста, переключение между приложениями, за счёт чего, по словам OpenAI, память формируется быстрее и экономнее.
• Ассистент опирается на хронологию и сам находит относящиеся к задаче файлы, документы и переписки, будь то Google Docs, Slack или открытая вкладка браузера, без повторного пересказа контекста.
• Данные хранятся локально, функция выключена по умолчанию, отдельные приложения и сайты исключаются через строку меню macOS и настройки десктопного клиента, но сводки всё же уходят модели.

Почему это важно Отказ от захвата экрана выглядит попыткой обойти спор, который сопровождал Recall у Microsoft: локальное хранение и список исключений снимают часть претензий к постоянному наблюдению за рабочим столом. Но модель всё равно получает сводки активности, и для корпоративных заказчиков это, вероятно, окажется решающим аргументом: разрешать такое на рабочих машинах готовы далеко не все службы безопасности. Функция затрагивает не только личные предпочтения, но и политику компаний, которые оплачивают тарифы Business и Enterprise.

ChatGPT ищет контекст в Google Docs, Slack и открытых вкладках браузера

OpenAI приводит примеры запросов, на которые Computer History дала бы ответ: «что я вчера отлаживал» или «на чём я остановился в том пул-реквесте». Ассистент отвечает, не требуя заново описывать рабочую задачу, и подтягивает относящиеся к ней файлы, документы и обсуждения.

Источник не имеет значения: документ в Google Docs, ветка в Slack или открытая вкладка браузера. Отдельно OpenAI называет сценарий, когда пользователь помнит, что читал что-то нужное, но не помнит где. Функция доступна в ChatGPT Work и в Codex на macOS.

Кундель отмечает, что когда агент понимает, чем занят пользователь, меняется характер работы с ним: можно попросить создать навык на основе только что проделанных действий, запускать каждое утро автоматизацию с черновиком отчёта для команды или настроить использование инструментов под свои привычки.

Вместо скриншотов Computer History записывает клики, ввод текста и переключение приложений

Доминик Кундель из OpenAI в презентационном ролике объясняет, что Computer History не опирается на захват экрана или звука, а собирает события взаимодействия: клики, набор текста, переключение между приложениями и другие действия. По его словам, так память фиксируется быстрее и эффективнее.

От исследовательского эксперимента Chronicle новая функция отличается способом сбора данных: Chronicle решал ту же задачу, но строил хронологию через снимки экрана и распознавание текста. Testing Catalog описывает Computer History как обновление Chronicle. Record & Replay, ещё одна функция для ChatGPT и Codex, устроена иначе: пользователь показывает рабочий сценарий, и тот превращается в многоразовый навык.

Исключения для приложений и сайтов настраиваются в строке меню macOS

Пользователь сам определяет, к каким приложениям и сайтам у Computer History есть доступ. В macOS появляется отдельный пункт в строке меню, позволяющий исключить любую программу, а в десктопном клиенте ChatGPT добавлена настройка с исключениями для приложений и веб-сайтов. По умолчанию функция выключена, а запись в любой момент ставится на паузу из той же строки меню.

Все собранные данные хранятся локально, поэтому пользователь может посмотреть, что именно зафиксировала система, и удалить записи, которые не должны попадать в хронологию. Доступ к сводкам активности при этом получает модель. Раскатка идёт на все тарифы Pro, Business и Enterprise, и в OpenAI называют её по большей части глобальной.

Что дальше В ЕЭЗ, Великобритании и Швейцарии доступ к Computer History появится, по формулировке OpenAI, в ближайшие недели, конкретной даты нет. О поддержке других операционных систем не сообщается. Открытым остаётся и то, как на функцию отреагируют ИТ-службы компаний с тарифами Business и Enterprise: исключения и локальное хранение снимают часть вопросов, но не отменяют передачу сводок модели.