Pakistaanse rechters geven hun oordeel over JudgeGPT

In Pakistan heeft een proef met 1.559 rechters een op maat gemaakt AI-hulpmiddel getest, genaamd JudgeGPT, dat OpenAI's GPT-4 combineert met een database van 128.292 juridische uitspraken en 943 wetten. Het hulpmiddel hielp rechters bij juridisch onderzoek en het opstellen van documenten, wat leidde tot een toename van 6,3% in het aantal afgehandelde zaken per district, zonder een overeenkomstige daling in de kwaliteit van beslissingen. De studie, geleid door econoom Sultan Mehmood, gaf ook training aan sommige rechters, wat cruciaal bleek: rechters die specifieke training voor JudgeGPT kregen, logden gemiddeld 56 keer in en stuurden 212 prompts, vergeleken met 10 inlogbeurten en 25 prompts voor degenen met algemene training, en degenen zonder training lieten het hulpmiddel vaak ongebruikt. De onderzoekers gebruikten retrieval-augmented generation om hallucinaties te verminderen, en ze beoordeelden de kwaliteit van uitspraken door OpenAI's GPT-5-mini uitspraken van vóór en na de training te laten vergelijken, waarbij ervaren advocaten het in 70,6% van de gevallen eens waren met het model. Hoewel het hulpmiddel tijd bespaarde voor rechters, blijven er enkele zorgen bestaan over de kwaliteit van rechtspraak en het risico van overmatig vertrouwen op AI.