Juízes Paquistaneses Dão Seu Veredicto sobre o JudgeGPT
OpenAI
Um julgamento em grande escala no Paquistão descobriu que uma ferramenta de IA personalizada para juízes, combinada com treinamento, aumentou a resolução de casos em 6,3% sem reduzir a qualidade das decisões. A ferramenta, construída sobre o GPT-4 da OpenAI e dados jurídicos paquistaneses, foi usada por mais de 1.500 juízes.
No Paquistão, um estudo envolvendo 1.559 juízes testou uma ferramenta de IA personalizada chamada JudgeGPT, que combina o GPT-4 da OpenAI com um banco de dados de 128.292 decisões judiciais e 943 estatutos. A ferramenta auxiliou os juízes em pesquisa jurídica e elaboração de documentos, levando a um aumento de 6,3% nos casos resolvidos por distrito, sem queda correspondente na qualidade das decisões. O estudo, liderado pelo economista Sultan Mehmood, também forneceu treinamento a alguns juízes, o que se mostrou crucial: juízes que receberam treinamento específico para o JudgeGPT fizeram login 56 vezes e enviaram 212 prompts em média, em comparação com 10 logins e 25 prompts para aqueles com treinamento genérico, e aqueles sem treinamento frequentemente abandonavam a ferramenta. Os pesquisadores usaram geração aumentada por recuperação para reduzir alucinações, e avaliaram a qualidade das decisões fazendo o GPT-5-mini da OpenAI comparar decisões antes e depois do treinamento, com advogados experientes concordando com o modelo em 70,6% das vezes. Embora a ferramenta tenha economizado tempo para os juízes, permanecem algumas preocupações sobre a qualidade da justiça e o risco de dependência excessiva da IA.
Fonte: IEEE Spectrum AI —
original