LLM Ajanlarıyla Banka Analitik Boru Hattı Kurdum: 31 Çalıştırmadan 7'sinde Engellendi

Yazar, kamuya açık verileri analiz etmek için açık ağırlıklı LLM'ler kullanarak bir banka analitik boru hattı oluşturdu. Sistem, ortant.net üzerinde çalışıyor ve 24 kabul edilmiş çalışma, 10 banka dosyası ve özel bir araştırma oluşturucu sunuyor. Her çalıştırma, altı yapay zeka rolü aracılığıyla yedi kamu veri akışını işler: beş akış inceleyicisi, bir araştırma ajanı, üç danışman, bir başkan, bir iddia doğrulayıcı ve bir muhabir. Çalıştırma başına medyan maliyet 0,132 ABD dolarıdır ve 12,8 dakika sürer. Denenen 31 çalıştırmadan 7'si bir yayın kapısı tarafından engellendi: dördü sentezde başarısız oldu, ikisi yasaklı sözlük içeriyordu ve biri kişisel veri tespitinde yanlış pozitif verdi. Sistem, veri pasaportundan yayın kapısına kadar dört engel içeriyor. Yazar ayrıca, tahmine dayalı bir katmanın saf bir taban çizgisinden daha kötü olduğunu ve kaldırıldığını ve model tavsiyesinin kapsamı iyileştirdiğini ancak doğruluğu iyileştirmediğini belirtiyor. Makale, maliyetlerin ve yöntemlerin açıkça sergilendiği şeffaflığı vurguluyor.