Содержание
AMIE научилась видеть, слышать и консультировать пациента по видео
Google Research и Google DeepMind представили новую версию медицинской AI-системы AMIE для видеоконсультаций в реальном времени. Она построена на Gemini и Project Astra и умеет не только слушать ответы пациента, но и учитывать визуальные и звуковые сигналы: дыхание, походку, заметный дискомфорт и результаты простых действий перед камерой.
Как устроена AMIE Video
Внутри одновременно работают три специализированных AI-агента. Talker поддерживает естественный разговор без долгих пауз, Planner в фоне обновляет возможные диагнозы и план действий, а Perception анализирует изображение и звук. Такое разделение позволяет системе продолжать общение, пока более глубокий анализ идёт параллельно.
AMIE также может направлять виртуальный осмотр: например, попросить пациента показать определённое движение или выполнить простую проверку перед камерой. Для телемедицины это важный шаг, потому что текстовый чат теряет часть информации, которую врач обычно получает через наблюдение.
Что показало исследование
Google провела рандомизированное исследование на 100 клинических сценариях и 300 консультациях с профессиональными актёрами в роли пациентов. Независимые врачи оценили AMIE Video на уровне врачей первичной помощи по полноте сбора истории, точности диагностики, уместности рекомендаций и качеству общения. В выявлении физических признаков и проведении виртуального осмотра система в среднем получила более высокие оценки.
Участники также предпочли видеоформат текстовому чату: он показался им удобнее для описания симптомов. Для создателей цифровых медицинских сервисов результат демонстрирует, как мультимодальный AI может превратить обычного чат-бота в более естественный интерфейс для первичного сбора данных и подготовки консультации.
Это пока не замена врачу
AMIE остаётся исследовательской системой и недоступна как самостоятельный медицинский сервис. Испытания проходили не с реальными пациентами, а в симулированных условиях; разработчики также отмечают отдельные ошибки восприятия и рассуждения. Перед практическим применением технологии нужны клинические исследования, строгий врачебный контроль и отдельная проверка безопасности.