GPT-4, kişilik testlerine verilen toplu yanıtları önceden tahmin edebiliyor

iScience’da yayımlanan yeni bir araştırma, GPT-4’ün farklı metinlerden kişilik testleri oluşturabildiğini ve insanların bu testlere vereceği yanıtların genel dağılımını, anketler uygulanmadan önce tahmin edebildiğini ortaya koydu. Kudüs İbrani Üniversitesi ve Hadassah Tıp Fakültesi’nden Rotem Monsa, Aviv Zohar ve Shahar Arzy tarafından yürütülen çalışmada, GPT-4’ten iki farklı kaynağı temel alan kişilik anketleri hazırlaması istendi.

Araştırmacılar kaynaklardan biri olarak psikiyatride kullanılan DSM-5’in kişilik bozuklukları bölümünü, diğeri olarak ise bilimsel geçerliliği bulunmayan bir astroloji kitabını seçti. Araştırmanın başyazarı Rotem Monsa, iki metnin insan kişiliğini ayrıntılı biçimde ele almasına rağmen bilimsel dayanak bakımından spektrumun farklı uçlarında yer aldığını belirtiyor.

GPT-4 tarafından oluşturulan anketler, 600 yetişkine uygulandı. Katılımcılar aynı zamanda kişilik araştırmalarında yaygın biçimde kullanılan Beş Büyük Kişilik Envanteri’ni de doldurdu. DSM-5 temel alınarak hazırlanan ankette, gerçek hayatta birbiriyle ilişkili olan kişilik özelliklerinin katılımcı yanıtlarında da birlikte hareket ettiği görüldü. Örneğin kaçınma ve bağımlılık gibi birbiriyle bağlantılı özellikler arasında tutarlı ilişkiler tespit edildi. Bu anketin iç tutarlılığı, Beş Büyük Kişilik Envanteri’nde gözlemlenen örüntülerle benzerlik gösterdi.

Astroloji kitabından üretilen ankette ise burçlar veya elementler altında bir araya getirilen kişilik özelliklerinin tutarlı psikolojik boyutlar oluşturmadığı görüldü. Buna rağmen her iki anketin ayrı ayrı maddeleri; depresyon, kaygı ve genel iyilik hali gibi çeşitli sonuçlarla anlamlı ilişkiler kurabildi. Araştırmacılara göre bu durum astrolojinin geçerliliğini göstermiyor. Bulgular, GPT-4’ün bilimsel olmayan bir metindeki kişilikle ilgili ifadelerden bile ölçülebilir psikolojik sinyaller çıkarabildiğine işaret ediyor.

Çalışmanın dikkat çeken bölümü, GPT-4’ün katılımcılardan veri toplanmadan önce yaptığı tahminler oldu. Modelden, beşli Likert ölçeğindeki her soruya verilecek ortalama yanıtları ve sorular arasındaki ilişkileri öngörmesi istendi. Paylaşılan sonuçlara göre, modelin tahminleriyle katılımcıların ortalama yanıtları arasındaki korelasyon DSM-5 tabanlı ankette 0,71, astroloji tabanlı ankette ise 0,85 olarak ölçüldü.