OpenAI brengt desktop ChatGPT Voice-modus uit met computervaardigheden

OpenAI heeft donderdag zijn ChatGPT-bureaubladapp bijgewerkt met ondersteuning voor ChatGPT Voice, waardoor gebruikers spraakopdrachten kunnen geven om AI-agenten te besturen en taken uit te voeren. De functie maakt gebruik van OpenAI's nieuwe ChatGPT-Live-spraakmodellen die eerder deze maand zijn gelanceerd. ChatGPT Voice werkt met zowel ChatGPT Work als Codex, en kan gebruikmaken van computervaardigheden om websites en apps te bekijken. Op macOS kunnen gebruikers met Appshots de app toegang geven tot scherminhoud, inclusief alternatieve tekst. In tegenstelling tot de smartphoneversie, die vloeiendere gesprekken mogelijk maakte maar geen actie kon ondernemen, maakt de bureaubladupdate het mogelijk om complexe meerstapsopdrachten te dicteren en reageert het wanneer invoer nodig is. In een demo gebruikte een ontwikkelaar één spraakopdracht om een thread aan te maken, een pull-verzoek te doen en de hoofdoorzaak van een bug te vinden. Gebruikers hebben ook toegang tot ChatGPT Voice in Codex via de iOS-app via externe toegang. Afzonderlijk heeft Anthropic zijn spraakmodus voor Claude bijgewerkt, waarbij gebruik wordt gemaakt van de modellen Opus, Sonnet en Haiku om taken uit te voeren in Gmail, Calendar, Slack, Notion en Canva.