Google DeepMind heeft een grote doorbraak bereikt in medische AI met het verbeterde Articulate Medical Intelligence Explorer (AMIE)-systeem, dat nu visuele medische data kan analyseren naast tekstgebaseerde gesprekken.
De vernieuwde AMIE, aangedreven door Google's Gemini 2.0 Flash-model, kan verschillende medische beelden interpreteren, waaronder dermatologische foto's, ECG's en laboratoriumdocumenten tijdens liveconsultaties. Dankzij deze multimodale capaciteit kan de AI tijdens het gesprek om visuele input vragen, deze analyseren en de bevindingen meenemen in het diagnostisch proces.
In een uitgebreide evaluatie met 105 gesimuleerde consultaties presteerde AMIE beter dan gecertificeerde huisartsen. Medisch specialisten die de consultaties beoordeelden, gaven AMIE hogere scores op diverse kritieke punten, waaronder de kwaliteit van beeldinterpretatie, diagnostische nauwkeurigheid en het opstellen van behandelplannen.
"AMIE's interne toestand legt vast wat het systeem op een bepaald moment in het gesprek over de patiënt weet," aldus onderzoekers van Google DeepMind in hun aankondiging van mei 2025. Hierdoor kan het systeem zijn vragen en antwoorden sturen zoals een ervaren arts die bewijsmateriaal verzamelt.
Patiëntacteurs die deelnamen aan het onderzoek beoordeelden de interacties met AMIE vaak als beter dan die met menselijke artsen. Eén van hen merkte op dat AMIE's uitleg over een huidaandoening duidelijker was dan wat ze onlangs tijdens een teleconsult kregen.
Deze ontwikkeling komt op het moment dat het AI Index-rapport 2025 van Stanford University ongekende vooruitgang in AI-toepassingen voor de gezondheidszorg signaleert. Volgens het rapport is het aantal door de FDA goedgekeurde medische apparaten met AI gestegen van slechts zes in 2015 naar 223 in 2023.
Hoewel de mogelijkheden van AMIE indrukwekkend zijn, benadrukt Google dat het systeem nog experimenteel is. Praktijktesten zijn nu gestart via een onderzoeks-samenwerking met het Beth Israel Deaconess Medical Center, waar AMIE in echte klinische omgevingen met toestemming van patiënten wordt geëvalueerd.
"De integratie van multimodale waarneming en redenering is een waardevolle stap vooruit voor de mogelijkheden van conversatie-AI in de geneeskunde," aldus Google-onderzoekers. "Door AMIE in staat te stellen visueel bewijsmateriaal te 'zien' en te interpreteren dat cruciaal is voor de klinische praktijk, toont dit onderzoek de AI-capaciteiten die nodig zijn om patiënten en artsen effectiever te ondersteunen bij hoogwaardige zorg."