Doğrulukları üzerine hazırlanan rapor, popüler yapay zeka sohbet botlarının yanlış iddialarda bulunmaya, güncel olmayan rakamları kullanmaya ve aynı soruyu farklı günlerde farklı şekillerde yanıtlamaya yatkın olduğunu ortaya koydu.
Doğruluk kontrolü yapan Full Fact kurumunun raporu, sohbet botlarının, istifa etmesinden haftalar sonra eylül ayında bile Keir Starmer'ın hala İngiltere başbakanı olduğunu iddia eden bir yanıt da dahil olmak üzere, sorulara kendinden emin bir şekilde yanlış yanıtlar verdiğini açığa çıkardı.
Araştırmacılar, yanıtların doğruluğunu, tutarlılığını ve güncelliğini analiz etmek amacıyla temmuz ortasından itibaren 10 hafta boyunca her gün yaygın olarak kullanılan beş yapay zeka modeline aynı soruları yöneltti.
Claude, ChatGPT, Gemini, DeepSeek ve Grok'a, oy kullanmak için kimliğe ihtiyacım var mı ve 2026'nın ilk yarısında küçük teknelerle kaç göçmen geldi gibi 22 soru soruldu.
Raporda, sohbet botlarının genellikle doğru yanıtlar verdiği ve kökleşmiş yanlış bilgilere direndiği belirtildi.
Ancak bazı sorular için modeller, resmi istatistikleri kaynak göstermek yerine kendi başlarına yanlış rakamlar hesapladı veya güncel olmayan verileri güncelmiş gibi sundu.
Full Fact, sohbet botlarına 2026'nın ilk yarısında İngiltere'ye küçük teknelerle kaç göçmenin geldiğinin sorulduğu bir örneğe atıfta bulundu.
Modellerin çoğu doğru rakamlar verdi ancak 4 Ağustos'ta Gemini yanlışlıkla 12 bin 210 varış bildirdi. Doğruluk kontrolörleri, 1 Ağustos itibarıyla bildirilen toplam 14 bin 526 rakamından temmuz ayında kaydedilen 2 bin 316 varışın çıkarılmasıyla bu rakama ulaşıldığını tespit etti.
Matematik doğru olsa da model 1 Ağustos tarihini hariç tutmayı unuttu ve bu da ortaya çıkan rakamın ocak ile haziran arasını ve 1 Ağustos'u kapsadığı anlamına geliyordu.
Başka bir olayda, sohbet botlarına İngiltere'nin en son ne zaman büyük bir futbol kupası kazandığı soruldu.