• ChatGPT yapımcısı OpenAI, ChatGPT aptallaşıyor iddialarını yakın bir zamanda yalanlamıştı.
• Buna rağmen Stanford bilim insanlarının yaptığı bir araştırma, ChatGPT’nin zaman içinde sorulara daha hatalı cevaplar vermeye başladığını gösteriyor.

ChatGPT’nin popülaritesi düşüyor. Sohbet robotunun internet sitesine tıklayanlar ve uygulamasını indirenlerin sayısı düştü. Buna ek olarak yeni yapılan bir araştırma bazı kullanıcıların şikâyetlerini doğruladı. Stanford bilim insanlarının yaptığı araştırmaya göre ChatGPT gerçekten aptallaşıyor.

ChatGPT’yi uzun süredir kullanan bazı kullanıcılar, şikâyetlerini yakın zamanda sosyal medya ve forumlara taşımıştı. Kullanıcıların iddialarına göre ChatGPT ilk çıktığı zamanlara göre daha düşük nitelikli yanıtlar üretiyordu.

Ancak OpenAI, ChatGPT’nin niteliğinin düştüğünü reddetti. Örneğin bir şirket yöneticisi, attığı bir tweette “Hayır, ChatGPT’yi aptallaştırmadık.” yazdı. Ardından ekledi: “Her yeni sürümü daha akıllı hale getiriyoruz.”

OpenAI ne iddia ederse etsin araştırmacılar, şu an ChatGPT’nin aptallaştığı konusunda hemfikir. Yeni araştırmalar OpenAI’ın büyük dil modelinin (LLM) daha aptal hale geldiğini söylüyor.

Stanford ve Berkeley’den araştırmacıların bulgularına göre birkaç aylık bir sürede hem GPT-3.5 hem GPT-4’ün verdiği yanıtların doğruluğu düştü. Bu durum, botun belirgin bir şekilde bozulduğuna dair kullanıcı hikâyelerini doğruluyor.

Araştırmacılar, makalenin özetinde GPT-4’ün Mart 2023 sürümünün asal sayıları tanımlamada çok iyi olduğunu (doğruluk oranı %97,6) ancak Haziran sürümünün aynı sorularda çok zayıf olduğunu (doğruluk oranı %2,4) yazdı.

Ayrıca özet, hem GPT-4 hem de GPT-3.5’in kod yazmada haziran ayında mart ayına kıyasla daha fazla biçimlendirme hatası yaptığını belirtiyor.

Araştırmacılar, ChatGPT işlem becerisindeki düşüşün nedenini ortaya koymadı. ChatGPT aptallaşıyor ama neden bunu bilmiyoruz. Fakat zaman içinde gelişen bu gözle görülür kötüleşme, OpenAI’ın modellerin giderek daha iyiye gittiği yönündeki ısrarını haksız çıkarıyor.

Derleyen: İsa Arslan