Google DeepMind досягла значного прориву в медичному штучному інтелекті завдяки вдосконаленій системі Articulate Medical Intelligence Explorer (AMIE), яка тепер може аналізувати візуальні медичні дані поряд із текстовими консультаціями.
Оновлена AMIE, що працює на базі моделі Gemini 2.0 Flash від Google, здатна інтерпретувати різноманітні медичні зображення, включаючи дерматологічні фото, ЕКГ та лабораторні документи під час живих консультацій. Завдяки мультимодальним можливостям ШІ може запитувати візуальні дані в процесі розмови, аналізувати їх і враховувати результати у своїй діагностиці.
У масштабному дослідженні, що охопило 105 симульованих консультацій, AMIE продемонструвала кращі результати порівняно з лікарями загальної практики з відповідною сертифікацією. Медичні експерти, які оцінювали консультації, поставили AMIE вищі бали за низкою ключових критеріїв, зокрема за якістю інтерпретації зображень, точністю діагностики та розробкою плану лікування.
«Внутрішній стан AMIE відображає її знання про пацієнта на певному етапі розмови», — пояснили дослідники Google DeepMind у своєму оголошенні у травні 2025 року. Це дозволяє системі спрямовувати свої питання та відповіді подібно до досвідченого клініциста, який збирає докази.
Актори-пацієнти, які брали участь у дослідженні, часто оцінювали взаємодію з AMIE як кращу, ніж із лікарями-людьми. Один з учасників зазначив, що пояснення AMIE щодо стану шкіри було зрозумілішим, ніж під час нещодавньої телемедичної консультації.
Цей розвиток відбувається на тлі звіту Stanford AI Index 2025, який підкреслює безпрецедентний прогрес у застосуванні ШІ в охороні здоров’я. У звіті зазначено, що кількість медичних пристроїв із підтримкою ШІ, схвалених FDA, зросла з шести у 2015 році до 223 у 2023 році.
Попри вражаючі можливості, Google наголошує, що система поки що є експериментальною. Реальні випробування розпочинаються у партнерстві з Beth Israel Deaconess Medical Center, де AMIE оцінюватимуть у клінічних умовах за згодою пацієнтів.
«Інтеграція мультимодального сприйняття та міркування є важливим кроком уперед для можливостей розмовних ШІ у медицині», — заявили дослідники Google. «Завдяки тому, що AMIE може “бачити” та інтерпретувати візуальні докази, які є критично важливими для клінічної практики, це дослідження демонструє ті можливості ШІ, які потрібні для ефективнішої допомоги пацієнтам і лікарям у наданні якісної медичної допомоги».