Googles AMIE erreicht Expertenniveau bei audiovisuellen klinischen Konsultationen

Google Research hat ihr medizinisches KI-System AMIE weiterentwickelt, um Videokonsultationen in Echtzeit durchzuführen. In einer randomisierten kontrollierten Studie mit simulierten Konsultationen erreichte das System eine Leistung auf Expertenniveau. Das System AMIE (Video), das auf Gemini und Project Astra basiert, adressiert die Einschränkungen textbasierter Schnittstellen, indem es nonverbale Hinweise wahrnimmt, virtuelle körperliche Untersuchungen anleitet und in Echtzeit diagnostisch schlussfolgert. Um die Gesprächslatenz mit tiefgründigem Denken in Einklang zu bringen, verwendet AMIE (Video) eine asynchrone Multi-Agenten-Architektur mit drei spezialisierten Agenten, die parallel arbeiten. In einer Studie mit 100 Szenarien, 300 Live-Konsultationen und 30 board-zertifizierten Hausärzten wurde AMIE (Video) in Bezug auf klinische Kernkompetenzen gleichwertig mit den Hausärzten bewertet. Es wurde deutlich höher bewertet als sowohl die Hausärzte als auch AMIE (Text) bei der Erhebung körperlicher Anzeichen und der Anleitung virtueller Untersuchungen. Die Patientendarsteller bevorzugten die Video-Schnittstelle. Zu den Einschränkungen gehören die Verwendung simulierter Umgebungen und gelegentliche Wahrnehmungsfehler. Eine weitere Validierung mit echten Patienten ist erforderlich.