Screenpipe превращает рабочий день за компьютером в память для AI-агентов

Команда Screenpipe представила сервис, который локально собирает контекст работы за компьютером и делает его доступным AI-агентам. Приложение фиксирует изменения на экране и звук, а затем позволяет искать по тому, что пользователь видел, говорил и слышал. Результат можно подключать к Claude, ChatGPT, Hermes, OpenClaw и другим агентным системам.

Как Screenpipe собирает рабочий контекст

Вместо непрерывной записи видео с постоянным распознаванием каждого кадра Screenpipe отслеживает значимые события: переключение приложений, клики, паузы при наборе текста, прокрутку и периоды бездействия. В нужный момент сервис сохраняет снимок экрана вместе с деревом доступности операционной системы, а OCR использует только там, где структурированных данных недостаточно.

Аудио расшифровывается локально через Parakeet или Whisper либо с помощью облачных моделей. Собранные данные хранятся на устройстве в SQLite, видеофайлах и Markdown, а для AI доступен локальный API, MCP и навыки. Разработчик утверждает, что локальные модели рассчитаны на расход менее 1% CPU и до 400 МБ оперативной памяти.

Что смогут делать AI-агенты

Screenpipe можно попросить восстановить контекст по конкретной задаче, подготовить отчёт за день, собрать решения и поручения из встреч или автоматически вести личную базу знаний. Для бизнеса особенно интересен сценарий, в котором сервис анализирует повторяющиеся действия команды, превращает их в регламенты и предлагает процессы для автоматизации.

Готовые агенты могут запускаться по событиям. Например, после завершения встречи система сформирует краткое резюме, распределит задачи по участникам и сохранит результат в заметки. Другой сценарий — обновление CRM после просмотра профиля клиента или подготовка еженедельного отчёта на основе звонков, приложений и переписки.

Как устроена приватность

Пользователь может полностью исключить отдельные приложения, окна и сайты из записи — их содержимое не попадёт на диск. Для остальных данных предусмотрена локальная модель, которая удаляет номера карт, документы и ключи доступа. Screenpipe работает на macOS и Windows, экспериментально поддерживает Linux; персональное некоммерческое использование бесплатно, а коммерческое требует лицензии.