Daha iyi yanıtlar, daha geniş düşünme: ChatGPT ve eleştirel düşünme eğitiminin kazandırdıkları

Öğrenciler gerçek dünyadan bir ödevde ChatGPT kullandığında ne olur? Kalitedeki artış özgünlükten ödün verme pahasına mı gerçekleşir?

Bocconi Üniversitesi araştırmacılarının OpenAI Ekonomi Araştırmaları ekibiyle yürüttüğü yeni bir deney, ChatGPT erişimi ile eleştirel düşünme eğitiminin farklı ve birbirini tamamlayan etkileri olduğunu ortaya koydu. ChatGPT erişimi öğrencilerin çalışmalarının kalitesini ve tutarlılığını artırırken, eleştirel düşünmenin bir türü olan nedensel akıl yürütme alıştırması daha özgün fikirler üretmelerini sağladı. Hem ChatGPT erişimi hem de eğitim sunulan öğrencilerde iki etki de görüldü.

Sonuçlar, öğrencilerin gelişimini değerlendirirken bütüncül bir yaklaşım benimsemenin önemini de ortaya koyuyor. Yapay zekâ, öğrencilerin yetkin görünen yanıtlar üretmesini kolaylaştırdıkça ödevlerin özgünlük gibi diğer istenen nitelikleri ölçeyecek şekilde uyarlanması gerekebilir. 

Deney sırasında Bocconi Üniversitesinde lisansın ilk yılında okuyan 1.000'den fazla öğrenci, üniversitenin ürün mağazası için pazarlama önerileri geliştirdikleri gerçek bir iş vakası üzerinde çalıştı.

Öğrenciler ders saatlerine göre rastgele dört gruptan birine atandı: ChatGPT (GPT‑4o) erişimi sunulanlar, nedensel akıl yürütme eğitimi alanlar, ikisinden de yararlananlar ve hiçbirinden yararlanmayanlar. Nedensel akıl yürütme; neden ile sonucu ilişkilendirmeyi ve belirli bir çözümün neden işe yarayıp yaramayabileceğini açıklamayı içeren özel bir eleştirel düşünme biçimidir. Öğrencilere verilen eğitimin yapay zekâyla ilgisi yoktu. Bunun yerine bir oyun, örnekler, sorular ve geri bildirim içeren bir alıştırmayla nedensel akıl yürütme kavramları öğretildi. 

Öğrencilerin çalışmaları, eğitimli değerlendiriciler tarafından beş puanlı bir değerlendirme ölçeği kullanılarak incelendi. Araştırmacılar ayrıca otomatik metin analiziyle her çalışmadaki fikirlerin sayısını ve çeşitliliğini, nedensel akıl yürütme belirtilerini ve çalışmanın üç uzmanın yanıtlarıyla benzerliğini ayrı ayrı ölçtü. 

ChatGPT erişimi olan öğrenciler, beş puanlı ölçekte neredeyse bir tam puan daha yüksek sonuç aldı. Yanıtları daha fazla fikir içeriyor, daha açık bir mantık izliyor ve uzmanların hazırladığı önerilere daha çok benziyordu. Başka bir deyişle yapay zekâ, yeni başlayanların daha profesyonel görünen çalışmalar üretmesine yardımcı oldu. Daha da önemlisi, öğrenciler ödevlerini olduğu gibi ChatGPT'ye yaptırmıyordu. Yine de ne soracaklarına karar vermeleri, yanıtları değerlendirmeleri ve nihai çalışmalarına neleri dâhil edeceklerini seçmeleri gerekiyordu. 

Eleştirel düşünme alıştırması daha beklenmedik bir sonuç verdi. Alıştırmayı tamamlayan öğrenciler fikirlerinin neden işe yarayabileceğini ve hangi durumlarda başarısız olabileceğini daha açık biçimde açıkladı. Ancak önerilerin iki standart pazarlama hedefine, yani üniversite mağazasının bilinirliğini ve kullanımını artırmaya ne ölçüde hizmet ettiğini değerlendiren ölçekte daha yüksek puan almadılar.

Metin analizi, değerlendirme ölçeğinin yakalayamadığı başka bir faydayı ortaya çıkardı. Grup genelinde, alıştırmayı tamamlayan öğrenciler akranlarının ürettiklerine kıyasla daha farklı ve daha geniş bir fikir yelpazesi ortaya koydu. Bu önemli; çünkü deneyde öğrencileri değerlendirmek için kullanılana benzer geleneksel bir ölçek, açık ve iyi yapılandırılmış bir yanıtı ödüllendirirken öğrencinin başka hiç kimsenin düşünmediği bir fikir bulup bulmadığını gözden kaçırabilir.

Eğitim tartışmasını, öğrencilerin kendi başlarına düşünmeyi mi yoksa yapay zekâ kullanmayı mı öğrenmesi gerektiğine dair bir seçim olarak sunmak cazip gelebilir.

Bu deney, her ikisinin de farklı şekillerde değerli olduğunu gösteriyor. Yapay zekâ erişimi, öğrencilerin daha yetkin, fikir açısından daha zengin ve mantıksal olarak daha tutarlı yanıtlar üretmesine yardımcı oldu. Eleştirel düşünme eğitimi, öğrencileri daha geniş bir özgün fikir yelpazesi geliştirmeye, varsayımları sorgulamaya ve fikirlerinin neden işe yarayacağını açıklamaya teşvik etti.

Bu ikisi birlikte birbirini tamamlıyor. 

Hem ChatGPT erişimi sunulan hem de eleştirel düşünme alıştırmasını yapan öğrenciler, ikisinin de sağladığı faydaları gösterdi. Fikir çeşitlilikleri, yalnızca alıştırmayı tamamlayan öğrencilerinkiyle aynı düzeydeydi. Değerlendirme puanları ve fikir sayıları ise yalnızca ChatGPT erişimi olan öğrencilerinkine benziyordu. Çalışmaları ayrıca daha güçlü bir mantıksal tutarlılık sergiliyor; açıklama aradıklarına ve varsayımları sorguladıklarına dair daha fazla kanıt içeriyordu. Genel olarak bu grup, en geniş ölçüt yelpazesinde ilerleme kaydetti. 

Deneyin rastgele atamalı tasarımı, araştırmacıların bu farklı etkenleri ayrıntılı olarak incelemesine ve ChatGPT erişimi ile eleştirel düşünme alıştırmasının ayrı ayrı etkilerini, ikisinin birleşik etkisinden ayırmasına olanak tanıdı. Bu da deneyi, yapay zekânın öğrenciler üzerindeki etkisine ve öğrenimlerinin en iyi nasıl yapılandırılıp desteklenebileceğine ilişkin hızla büyüyen araştırma birikimine özellikle yararlı bir katkı hâline getiriyor. 

Alıştırmanın öğrenciler üzerindeki etkisiyle geleneksel değerlendirme ölçeğinin ölçebildikleri arasındaki fark, okulların karşı karşıya olduğu daha kapsamlı bir soruna işaret ediyor. 

Yapay zekâ öğrencilerin yetkin ve uzman çalışmasına benzeyen işler üretmesine yardımcı olabiliyorsa yalnızca nihai yanıta bakmak, öğrencinin gerçekte ne anladığı hakkında daha az bilgi verir. 

Birçok eğitimci, ödevlerin ve değerlendirmelerin değişmesi gerekebileceği gerçeğiyle şimdiden uğraşıyor. Bu durum, öğrencilerin modern toplumda ihtiyaç duyduğu becerileri desteklemek üzere teknoloji ile eğitimin onlarca yıldır birlikte gelişmesi eğiliminin devamı niteliğinde.

Bu sonuçlar, öğrencileri yalnızca en geleneksel veya en yetkin görünen yanıtlar için değil; özgünlük, akıl yürütme ve birden fazla yaklaşımı değerlendirme becerisi yansıtan çalışmalar ürettikleri için de ödüllendirmenin önemini gösteriyor. 

Özetle: Yapay zekâ, öğrencilerin yanıtlarını iyileştirmesine yardımcı oldu. Eleştirel düşünme eğitimi, fikir yelpazelerini genişletmelerine yardımcı oldu. Bu ikisi, öğrencileri geleceğe hazırlarken birbirini tamamlayan roller üstleniyor.