Google DeepMind har nått ett stort genombrott inom medicinsk AI med sin förbättrade Articulate Medical Intelligence Explorer (AMIE), som nu kan analysera visuella medicinska data utöver textbaserade samtal.
Den uppdaterade versionen av AMIE, som drivs av Googles Gemini 2.0 Flash-modell, kan tolka olika medicinska bilder, inklusive dermatologiska foton, EKG:n och laboratoriedokument under pågående konsultationer. Denna multimodala förmåga gör det möjligt för AI:n att be om visuella indata mitt i ett samtal, analysera dem och integrera resultaten i sin diagnostiska process.
I en omfattande utvärdering med 105 simulerade konsultationer visade AMIE bättre resultat än legitimerade allmänläkare. Medicinska specialister som granskade konsultationerna gav AMIE högre betyg på flera avgörande punkter, såsom bildtolkningskvalitet, diagnostisk precision och utveckling av behandlingsplaner.
"AMIE:s interna tillstånd fångar dess kunskap om patienten vid en given tidpunkt i samtalet," förklarade forskare från Google DeepMind i sitt tillkännagivande i maj 2025. Detta gör att systemet kan styra sina frågor och svar likt en erfaren kliniker som samlar in bevis.
Patientaktörer som deltog i studien gav ofta högre betyg till interaktioner med AMIE än med mänskliga läkare. En deltagare noterade att AMIE:s förklaring av en hudåkomma var tydligare än den de fått under ett nyligt digitalt vårdbesök.
Utvecklingen sker samtidigt som Stanford Universitys AI Index-rapport för 2025 lyfter fram en aldrig tidigare skådad utveckling inom AI-tillämpningar i sjukvården. Rapporten noterade att antalet FDA-godkända AI-baserade medicintekniska produkter har ökat från endast sex år 2015 till 223 år 2023.
Trots AMIE:s imponerande kapacitet betonar Google att systemet fortfarande är experimentellt. Nu inleds tester i verkliga miljöer genom ett forskningssamarbete med Beth Israel Deaconess Medical Center, där AMIE ska utvärderas i klinisk praxis med patienters samtycke.
"Integrationen av multimodal perception och resonemang markerar ett viktigt steg framåt för konversations-AI inom medicinen," uppgav Google-forskarna. "Genom att ge AMIE förmågan att 'se' och tolka den typ av visuella bevis som är avgörande i klinisk praxis, visar denna forskning vilka AI-förmågor som behövs för att mer effektivt kunna bistå patienter och kliniker med vård av hög kvalitet."