ChatGPT dahil beş yapay zeka test edildi: Güncel bilgilerde hata yaptılar

İngiltere merkezli doğrulama kuruluşu Full Fact tarafından gerçekleştirilen araştırmada, sohbet botlarının bazı sorulara farklı günlerde farklı yanıtlar verdiği, kimi zaman da eski istatistikleri güncel bilgiler gibi sunduğu belirlendi.

Testlerde özellikle göç verileri, siyasi gelişmeler ve maddi destek ödemeleriyle ilgili hatalar öne çıktı. Örneğin bazı modeller, İngiltere'ye Manş Denizi üzerinden gelen göçmenlerin sayısını hesaplarken farklı zaman aralıklarına ait verileri kullandı. Bu durum, hesaplama doğru olsa bile başlangıç verilerinin yanlış seçilmesinin yanıltıcı sonuçlara yol açabileceğini gösterdi.

GÖÇ VERİLERİ VE SİYASİ GELİŞMELERDE HATA

Futbol alanındaki sorularda da tutarsızlıklar görüldü. İngiltere'nin en son ne zaman önemli bir futbol kupası kazandığı sorusuna bazı modeller farklı tarihlerde farklı yanıtlar verdi.

Araştırmada, bazı sohbet botlarının İngiltere Başbakanı Keir Starmer hakkında güncelliğini yitirmiş bilgiler sunduğu da aktarıldı. Sığınmacılara yapılan haftalık ödemelerle ilgili sorularda ise güncel tutarlar yerine eski rakamların kullanıldığı tespit edildi.

UZMANLARDAN GÜNCEL KAYNAK ÇAĞRISI

Full Fact İcra Kurulu Başkanı Chris Morris, yapay zeka sistemlerinin yanıtlarının her zaman tamamen yanlış olmadığını ancak eksik bilgi içerebildiğini veya gerekli bağlamı sunamayabildiğini belirtti. Morris, özellikle insanların günlük yaşamlarını etkileyen konularda bu tür hataların önem taşıdığına dikkat çekti.

Araştırmacılar, yapay zeka şirketlerine değişen konularda güncel ve güvenilir kaynaklardan yararlanma, yanıtların dayandığı bilgileri açıkça gösterme çağrısında bulundu. OpenAI ise olgusal doğruluğun öncelikleri arasında yer aldığını ve hata oranlarını azaltmak için çalışmaların sürdüğünü bildirdi.