OpenAI veröffentlicht Desktop-ChatGPT-Sprachmodus mit Computerfähigkeiten

OpenAI hat am Donnerstag seine ChatGPT-Desktop-App aktualisiert und unterstützt nun ChatGPT Voice. Nutzer können Sprachbefehle nutzen, um KI-Agenten zu steuern und Aufgaben auszuführen. Die Funktion verwendet die neuen ChatGPT-Live-Sprachmodelle, die Anfang des Monats eingeführt wurden. ChatGPT Voice funktioniert sowohl mit ChatGPT Work als auch mit Codex und kann Computerbedienungsfähigkeiten nutzen, um Websites und Apps aufzurufen. Auf macOS können Nutzer mit Appshots der App den Zugriff auf Bildschirminhalte einschließlich Alternativtexten erlauben. Anders als die Smartphone-Version, die flüssigere Gespräche ermöglichte, aber keine Aktionen ausführen konnte, ermöglicht das Desktop-Update das Diktieren komplexer mehrstufiger Befehle und reagiert, wenn Eingaben erforderlich sind. In einer Demo erstellte ein Entwickler mit einem Sprachbefehl einen Thread, erstellte einen Pull-Request und fand die Ursache eines Fehlers. Nutzer können ChatGPT Voice in Codex auch über die iOS-App per Fernzugriff verwenden. Unabhängig davon hat Anthropic seinen Sprachmodus für Claude aktualisiert, der die Modelle Opus, Sonnet und Haiku verwendet, um Aufgaben in Gmail, Kalender, Slack, Notion und Canva zu erledigen.