Yapay Zekâ Sohbet Botları Detaylı Bir Araştırma Testine Sokuldu: İşte Şaşırtan Sonuçlar!

Yapay zekâ sohbet botları süratle yaygınlaşıyor ve birçoğumuz hayatımın her alanında kullanmaya başladık lakin şayet onları yanlışsız bilgi kaynağı olarak görüyorsanız önemli bir kusur yapıyor olabilirsiniz.

Yeni bir araştırma yapay zekâ sohbet botlarının hakikat bilgiye ulaşma konusunda sınıfta kaldığını gözler önüne seriyor.

Araştırma hangi evreleri içeriyordu?

Columbia Journalism Review ve Tow Center for Digital Journalism tarafından yürütülen araştırma, sekiz yapay zekâ sohbet botunu gerçek haberler üzerinden test etti.

Araştırmacılar, her bir yapay zekâ sohbet botuna bir haberden alıntı vererek bu alıntının ana kaynağını bulmasını, akabinde başlığını, yayıncısını ve yayın tarihini paylaşmalarını istedi. Araştırmada test edilen yapay zekâ sohbet botları şunlardı:

• ChatGPT
• Perplexity
• Perplexity Pro
• DeepSeek
• Microsoft Copilot
• Grok-2
• Grok-3
• Gemini

Sonuçlar ise pek iç açıcı değildi. Birçok sohbet botu ya yanlış bilgiler sundu ya da eksik yanıtlar verdi. Üstelik, cevaplarının yanlış olduğu konusunda kuşkulu bir hal da sergilemeden yanlışsız karşılığı sunduklarını kesin bir lisanla tabir ediyorlardı.

Yapay zekâ sohbet botları yalnızca %40 doğruluğa ulaşabildi

Araştırmanın tamamlanmasıyla birlikte yapay zekâ sohbet botlarına dair birtakım çarpıcı bulgulara ulaşıldı.

• Sohbet botlarının ortalama doğruluk oranı %40’ın altında kaldı.
• En yeterli sonuçları %63 doğruluk oranıyla Perplexity verdi.
• En berbat performansı %6 doğruluk oranıyla Grok-3 sergiledi.
• Ücretli sohbet botları, fiyatsız versiyonlara kıyasla daha kuşkulu yaklaşım sergiledi fakat tekrar de yanlış karşılıklar verdi.
• Birden fazla sohbet botu, haber sitelerinin erişim pürüzlerini ihlal etti ve ödeme yapılması gereken içeriklere ulaşmanın yolunu buldu.

Peki araştırmadan çıkarılması gereken ders ne?

Araştırma, yapay zekâ sohbet botlarının gerçek bilgiye ulaşma konusunda yetersiz olduğunu bir defa daha kanıtladı.

Uzmanlar, bu sistemlerin sadece ilham almak ve fikir üretmek için kullanılmasını lakin gerçek bilgi arayışında katiyetle güvenilmemesini öneriyor.

Yapay zekâ ile ilgili başka içeriklerimiz: