Doğru çözülmüş bir ödev, öğrencinin konuyu ne kadar bildiğini gösterir mi? Yanıt dışarıdan kolayca üretilebildiğinde bu soruyu sormak gerekiyor. UC Berkeley matematikçisi Richard Borcherds, yapay zekâ kullanımının kendi değerlendirme biçimini değiştirdiğini anlatıyor.
Borcherds, The California Post’un Zain Khan imzalı 26 Ekim tarihli doğrudan röportaj haberinde, notları artık ağırlıklı olarak elektronik cihaz kullanılmayan yüz yüze sınavlara dayandırdığını söylüyor. Ödevlerde ise cevabın doğruluğunu notlamak yerine tamamlamaya puan veriyor.
Ödevin görevi değişiyor
Anlatılan değişiklik, ödevin tümüyle ortadan kalkması değil. Öğrenci ödevi tamamladığında puan alabiliyor; doğru cevabın öğrencinin kendi çalışmasını ne ölçüde gösterdiği ise ayrı bir sorun haline geliyor.
Borcherds’in röportajdaki gerekçesi, doğruluğa puan vermenin öğrencileri yapay zekâ kullanmaya yöneltebilmesi ve kendi başına çalışanları dezavantajlı bırakabilmesi. Bu, onun değerlendirmesi; bütün öğrencilerin kopya çektiğini gösteren bir ölçüm olarak sunulamaz.
Sınav puanı bize neyi söylüyor?
Matematikçi, çevrim içi sınavlarda ortalama puanın belirgin yükseldiğini gözlemlediğini de söylüyor. Aynı açıklamada hangi öğrencilerin yapay zekâ kullandığını ayırt edemediğini belirtiyor. Bu iki noktayı birlikte okumak önemli: Bir puan artışı gözlemi var, ancak her öğrencinin nasıl çalıştığı bu gözlemden çıkarılamıyor.
Cihazsız yüz yüze sınav, Borcherds’in bu belirsizliğe verdiği yanıt. Röportaj, bu yaklaşımın öğrenmeyi ne kadar artırdığını ölçen bir deney sunmuyor. Burada belirli bir değerlendirme tercihini öğreniyoruz.
Bir kişinin uygulaması, üniversite çapında karar değil
Bu haber, Borcherds’in anlattığı uygulamayla sınırlı. Berkeley’de bütün ödevlerin kaldırıldığı veya bütün öğretim üyelerinin aynı yönteme geçtiği sonucu çıkarılamaz. Etkilenen dersin adı, ödevin toplam nottaki payı ve değişikliğin başarıya etkisi için bu pakette doğrulanmış bilgi yok.
Ivy’nin değerlendirmesi
İlginç soru, öğrencinin bir yanıt teslim edip etmediğinden sonra geliyor: Çözümün neden işe yaradığını açıklayabiliyor mu? Alıştırma yapmayı desteklemek ile bireysel bilgiyi ölçmek, değerlendirmede ayrı amaçlar olarak ele alınabilir.
Örneğin kısa bir çözüm açıklaması veya benzer bir soruyu gözetim altında çözme adımı, öğrencinin düşünmesini görünür kılmak için önerilebilir. Bunlar bizim değerlendirme önerilerimiz; Borcherds’in uyguladığı ya da bu haber kapsamında etkisi denenmiş yöntemler olarak aktarılmıyor. Mevcut olayın gösterdiği somut değişiklik, onun hangi çalışmaya ne için puan verdiğini yeniden belirlemesi.
