OpenAI, yapay zeka modellerinin ikna kabiliyetini ölçmek için r/ChangeMyView subreddit’ini kullandı. Şirket, bu bilgiyi yeni “akıl yürütme” modeli o3-mini ile birlikte yayınladığı bir sistem kartında açıkladı.
Detaylar haberimizde…
OpenAI’dan İlginç Deney: Reddit’te Yapay Zeka İkna Testi
OpenAI, yapay zeka modellerinin ikna yeteneklerini ölçmek için ilginç bir deney gerçekleştirdi. Şirket, milyonlarca kullanıcının farklı görüşlerini tartıştığı r/ChangeMyView subreddit’ini bu amaçla kullandı. Bu bilgiyi, yeni “akıl yürütme” modeli o3-mini ile birlikte yayınladığı bir sistem kartında açıkladı.
r/ChangeMyView: Yapay Zeka Eğitim Verisi Madeni
Milyonlarca Reddit kullanıcısının üye olduğu r/ChangeMyView, kullanıcıların farklı konularda “sıcak fikirlerini” paylaştığı ve diğer kullanıcılardan farklı bakış açıları öğrenmeyi umduğu bir platform. Diğer kullanıcılar ise bu fikirlere karşı argümanlar sunarak orijinal gönderiyi yazan kişinin fikrini değiştirmeye çalışıyor. Bu subreddit, OpenAI gibi teknoloji şirketleri için yüksek kaliteli, insan tarafından oluşturulan veri açısından adeta bir altın madeni niteliğinde.
OpenAI’ın Metodu: Kapalı Ortamda İkna Denemeleri
OpenAI, r/ChangeMyView’dan kullanıcı gönderilerini topluyor ve yapay zeka modellerinden, Reddit kullanıcısının fikrini değiştirecek cevaplar yazmasını istiyor. Bu işlem kapalı bir ortamda gerçekleştiriliyor. Şirket daha sonra bu yanıtları test uzmanlarına gösteriyor ve uzmanlar, argümanın ne kadar ikna edici olduğunu değerlendiriyor. Son olarak OpenAI, yapay zeka modellerinin yanıtlarını aynı gönderi için verilen insan yanıtlarıyla karşılaştırıyor.
Reddit ile İçerik Lisanslama Anlaşması
ChatGPT’nin yaratıcısı OpenAI’ın Reddit ile bir içerik lisanslama anlaşması bulunuyor. Bu anlaşma, OpenAI’ın Reddit kullanıcılarının gönderileri üzerinde eğitim yapmasına ve bu gönderileri ürünlerinde görüntülemesine olanak tanıyor. OpenAI’ın bu içerik için ne kadar ödediği bilinmiyor, ancak Google’ın benzer bir anlaşma kapsamında Reddit’e yılda 60 milyon dolar ödediği bildiriliyor.
Değerli İnsan Verisi ve Etik Sorular
Ancak OpenAI, ChangeMyView tabanlı değerlendirmenin Reddit anlaşmasıyla ilgisi olmadığını belirtiyor. OpenAI’ın subreddit verilerine nasıl eriştiği belirsizliğini koruyor ve şirket, bu değerlendirmeyi kamuoyuna açıklama planı olmadığını söylüyor. OpenAI’ın ChangeMyView kıyaslaması yeni olmasa da (o1’i değerlendirmek için de kullanılmıştı), insan verilerinin yapay zeka modeli geliştiricileri için ne kadar değerli olduğunu ve teknoloji şirketlerinin veri setlerini elde etme yöntemlerinin ne kadar muğlak olduğunu vurguluyor.
Derleyen: Enis Yabar
