Finansal konularda sınıfta kaldı!

Yeni bir araştırma mali konularda sohbet botlarına bel bağlamanın ciddi sonuçlar doğurabileceğini gösterdi. Bilhassa karmaşık işlemlerde yapay zekanın verdiği yanlış cevapların dikkat çekici seviyelere ulaştığı görüldü.

Yapay zeka finansal tavsiye konusunda hâlen güvenli bir liman değil. Saturn isimli bir firma ChatGPT, Claude, Copilot, Grok ve Gemini’yi de kapsayan ücretli ve ücretsiz AI modellerinin dâhil olduğu bir çalışma gerçekleştirdi. Bu çalışmada popüler sohbet botları finansal bazlı sorulara ortalama yüzde 57 oranında yanlış yanıt verdi. Hesaplamalar gerektiren zor sorularda hata oranı yüzde 88’e çıkarken, bazı modellerde bu seviye yüzde 99’a kadar ulaştı.

Yapay Zeka Halüsinasyon Görüyor

Araştırmada 18 farklı yapay zeka sistemine 100’den fazla finansal soru yöneltildi ve toplamda 10 bini aşkın yanıt incelendi. Modeller cevaplarında hatalı hesaplamalar yaptı, vergi değişikliklerini atladı, gerçekte olmayan kurallar ve yönetmenlikler üretti. Saturn CEO’su Amal Jolly, “İnsanlar parasını değerlendirmek için AI araçlarına güveniyor ve onlardan tavsiye istiyor. Ancak eksik cevaplar alabiliyorlar. Bu da mali kayıplara neden oluyor” dedi.

Ücretli Olanlar da Kusursuz Değil

Ücretli ve yeni modeller genel olarak ücretsizlere nazaran daha başarılı olsa da durum tamamen düzelmedi. Araştırmanın en iyi sonucu Claude Opus 5’in akıl yürütme modunda görüldü, ancak bu model bile yanıtların yüzde 39’unda hata yaptı. AJ Bell’den Sarah Coles ise sohbet botlarının bütçe planlama ve temel araştırmada işe yarayabileceğini, fakat vergi, emeklilik ve yatırım gibi konularda uzman görüşünün yerini alamayacağını söyledi.