Google's AMIE komt tot expertniveau in audiovisuele klinische consulten

Google Research heeft zijn AMIE medische AI-systeem verbeterd om realtime videoconsultaties uit te voeren, met prestaties op expertniveau in een gerandomiseerde gecontroleerde studie met gesimuleerde consultaties. Het systeem, AMIE (Video), gebouwd op Gemini en Project Astra, pakt de beperkingen van tekstgebaseerde interfaces aan door non-verbale signalen waar te nemen, virtuele lichamelijke onderzoeken te begeleiden en in realtime diagnostisch te redeneren. Om gesprekslatentie in evenwicht te brengen met diepgaand redeneren, gebruikt AMIE (Video) een asynchrone multi-agentarchitectuur met drie gespecialiseerde agents die parallel werken. In een studie met 100 scenario's, 300 live consultaties en 30 gecertificeerde huisartsen werd AMIE (Video) gelijkwaardig beoordeeld aan huisartsen op kerncompetenties in de klinische praktijk. Het werd significant hoger beoordeeld dan zowel huisartsen als AMIE (Tekst) bij het verkrijgen van lichamelijke tekenen en het begeleiden van virtuele onderzoeken, en patiëntacteurs gaven de voorkeur aan de video-interface. Beperkingen zijn onder meer het gebruik van gesimuleerde settings en incidentele perceptuele fouten; verdere validatie met echte patiënten is nodig.