Beş önde gelen yapay zeka sohbet botu—Claude, ChatGPT, Gemini, DeepSeek ve Grok—kapsamlı bir doğruluk testine tabi tutuldu. Yayımlanan rapora göre, bu modellerden gelen yanıtlar eksik, bağlamdan yoksun veya zayıf kaynaklı olma eğiliminde. Test, yapay zeka destekli bilgi arama araçlarına artan güvenin sorgulanmasına yol açtı.
Testin kapsamı ve yöntemi
Rapora göre, her bir sohbet botuna farklı konularda sorular yöneltildi ve yanıtların doğruluğu, kaynak kalitesi ve bağlam bütünlüğü değerlendirildi. Sonuçlar, modellerin önemli bir kısmının yanıtlarında eksik bilgi, yanlış bağlam veya güvenilir olmayan kaynaklar kullandığını ortaya koydu. Özellikle karmaşık ve güncel konularda performansın düştüğü gözlendi.
Ekonomik ve ticari etkiler
Yapay zeka sohbet botları, müşteri hizmetlerinden içerik üretimine kadar geniş bir yelpazede kullanılıyor. Doğruluk sorunları, işletmeler için operasyonel riskler ve itibar kaybı yaratabilir. Ayrıca, yanlış bilgiye dayalı kararlar finansal kayıplara yol açabilir. Rapor, şirketlerin bu araçları kullanırken insan denetimini elden bırakmaması gerektiğini vurguluyor.
Arka plan ve bağlam
Yapay zeka modelleri, büyük dil modelleri (LLM) olarak adlandırılan teknolojilere dayanıyor. Bu modeller, eğitildikleri verilerdeki kalıpları taklit ederek yanıt üretiyor; ancak gerçek zamanlı doğrulama yapamıyor. Son yıllarda bu teknolojilere yapılan yatırımlar artsa da, güvenilirlik ve şeffaflık konusundaki endişeler sürüyor. Uzmanlar, modellerin eğitim verilerinin güncelliği ve kaynak çeşitliliğinin önemine dikkat çekiyor.