ChatGPT, üniversite öğrencilerinden iyi çıktı

HABER MERKEZİ

Los Angeles California Üniversitesi’nden araştırmacılar, söyleşi robotunun temelini oluşturan GPT-3 geniş dil modelinin, zeka testlerinde ya da ABD’deki üniversiteye kabul testi SAT gibi sınavlarda ortaya çıkan muhakeme sorunlarını çözmeleri istendiğinde ABD’li üniversite mezunları kadar iyi performans gösterdiğini buldu.

Araştırma için, görüntüleri modelin işleyebileceği bir metin biçimine dönüştürdükten ve ilaveten modelin sorularla katiyen karşılaşmamasını sağladıktan sonra, GPT-3’ün komplike bir şekiller dizisindeki bir sonraki görüntüyü tahmin etme kabiliyeti kontrol edildi.

Aynı sorunlar 40 UCLA lisans öğrencisine soruldu ve araştırmacılar, GPT-3’ün sorunların yüzde 80’ini doğru bir halde çözdüğünü, insan katılımcılar için yüzde 60’ın derhal altındaki yaklaşık puanın oldukça üstünde bulunduğunu buldular.

UCLA kadrosu ayrıca, üniversite adaylarının SAT puanlarıyla karşılaştırıldığında, suni zekanın insanoğlu için yaklaşık puandan daha iyi performans gösterdiğini de belirleme etti.

Çalışmanın baş yazarı Taylor Webb, ChatGPT’yi çalıştıran modelin suni genel zeka ya da insan düzeyinde zeka standardında olmadığını söyledi.

UCLA psikoloji profesörü Keith Holyoak da, “GPT-3 bir tür insan gibi düşünüyor olabilir. Ancak öte yandan, insanoğlu internetin tamamını sindirerek öğrenmediler, bu nedenden dolayı eğitim tekniği tamamiyle farklı. Bunu harbiden insanların yapmış olduğu gibi mi yapıyor, yoksa reel bir suni zeka mı bilmek istiyoruz” dedi.