Çin'de yaklaşık 27.000 öğrenciyi izleyen yeni bir çalışma, eğitimde üretken yapay zeka hakkında şimdiye kadarki en çarpıcı kanıtlardan bazılarını üretti: Yapay zeka araçlarını kullanan öğrenciler, ev ödevi puanlarının yüzde 18 arttığını ve ödevlerini çok daha kısa sürede tamamladığını gördüler; daha sonra yapay zeka yardımı olmadan girilen sınavlarda sınıf arkadaşlarından yüzde 20 daha düşük puan aldılar. Stockholm Üniversitesi'nden David Strömberg ile Hong Kong Üniversitesi'nden Victor Lei ve Wu Yanhui tarafından yürütülen araştırma, 18 Ağustos'ta The Economist tarafından vurgulandı ve SSRN üzerine bir çalışma makalesi olarak dağıtılıyor. Son dakika yapay zeka haberlerini takip eden okuyucular için bu, eğitimcilerin ve ebeveynlerin kolayca göz ardı edemeyeceği bir veri noktasıdır.
Kurulum ve şok
Araştırmacılar çoğu okulun tahmin ettiği bir soruyu yanıtlamak için yola çıktı: Yapay zeka öğrencilerin öğrenmesine mi yardımcı oluyor, yoksa bitirmelerine mi yardımcı oluyor? Ekip, altı ay boyunca farklı konularda on binlerce öğrenciyi takip ederek, ev ödevi performansını hem yapay zeka kullanıcıları hem de kullanmayanlar için sonraki sınav sonuçlarıyla karşılaştırabildi.
The Economist'in özetlediği gibi ana bulgular: Altı ay sonra, yapay zeka kullanan öğrencilerin ortalama ev ödevi puanları tüm derslerde yüzde 18 artarken, her bir ödev için harcanan süre ortalama 64 dakikadan 45 dakikaya düştü. Ancak sınav zamanı geldiğinde aynı öğrenciler, ödevlerinde yapay zekayı hiç kullanmamış sınıf arkadaşlarından yüzde 20 daha düşük puan aldılar.
Daha derindeki bulgu daha incelikli ve daha rahatsız edicidir. Economist'in analizi, "Ödev puanları bir zamanlar sınav performansını öngörüyordu; şimdi en yüksek puanı alanların sınavlarda daha kötü performans gösterme olasılıkları daha yüksek" dedi. Başka bir deyişle, öğretmenlerin güvendiği geleneksel sinyal (anlamayı temsil eden ödev notları) sessizce kırıldı. Ödevleri en iyi görünen öğrenciler materyali en az anlayanlar olabilir.
Dış kaynak kullanımı, öğrenme değil
Sınav puanları düşerken neden ödev puanları arttı? Veriler, araştırmacıların dış kaynak kullanımı olarak tanımladığı şeye işaret ediyor: öğrenciler, bir öğretmen olarak kullanmak yerine, işi modele teslim ediyor. Kamuoyunda tartışılan makaledeki rakamlar, çalışmadaki yapay zeka kullanıcılarının yaklaşık yüzde 81'inin ödevlerini etkili bir şekilde dil modellerine devrettiğini ve öğrenciler araçlara ne kadar uzun süre maruz kaldıkça dış kaynak kullanım oranının arttığını gösteriyor.
Desen yavaş yavaş ortaya çıktı. Çalışmanın başlarında, yapay zeka kullanan bazı öğrenciler ödev başına hâlâ 65 dakikadan fazla zaman harcadılar (kabaca kullanmayanlarla aynı süre). Ayrıca ödev ve sınav sonuçları da yapay zekadan kaçınan akranlarınınkine benziyordu. Araştırmacılar, bu öğrencilerin modelleri neredeyse hiç kullanmadıkları sonucuna vardı. Ancak evlat edinildikten altı ay sonra, yapay zekaya maruz kalan hiçbir öğrenci ödevine 65 dakikadan fazla zaman harcamadı. Ara sıra yardım olarak başlayan şey, görevden atamaya, tam delegasyona doğru kayıyor gibi görünüyor.
Bulguların göz ardı edilmesini bu kadar zorlaştıran şey de bu tırmanış. Bu, yapay zeka eğitiminin işe yaramayacağı anlamına gelmiyor; açıklayan ve sorgulayan Sokratik bir ortak olarak bilinçli olarak kullanıldığında, teknolojinin insanların öğrenmesine yardımcı olduğu kanıtlanabilir. Ergenlik çağındaki gençlerin ve gecikmiş ödevlerin olduğu doğal koşullarda, en az direnişin yolu doğrudan cevaptan geçer.
Çin neden temiz bir test örneği oluşturuyor?
Çalışmanın ortamı sonuçları güçlendiriyor. Çin'de üniversiteye kabul, yüksek riskli standart sınavlardan geçiyor ve ev ödevi notları, ders sonuçlarını başka yerlerde olduğu gibi şişirmiyor. Sınavlar dışarıdan kıyaslanıyor ve acımasızca sonuç veriyor; bu da yüzde 20'lik farkın kolay not verme veya öğretmen hoşgörüsüyle açıklanmasını zorlaştırıyor. Çalışma, araştırmacıların önem verdiği kanalları etkili bir şekilde izole etti: Yapay zeka, ödevlerin nasıl üretildiğini değiştirdi ve sınavlar gerçekte ne öğrenildiğini ölçtü.
Yüzlerce puan toplayan Hacker News hakkındaki makalenin tartışılması, açık bir sonraki soruyla boğuştu: Yapay zekanın çalışkan öğrencileri daha iyi, ilgisiz öğrencileri ise daha kötü hale getiren bir "güçlendirici" olup olmadığı. Makalenin kendi analizi bu rahatlatıcı çerçeveyi geriye doğru itiyor: Zaman kullanımı verileri, yapay zekayı kullanmaya başlayan öğrencilerin bile aylar boyunca sorumlu bir şekilde görevlendirmeye doğru sürüklendiğini gösteriyor; bu da riskin, ilk etapta asla öğrenmeyi düşünmemiş kişilerle sınırlı olmadığını ima ediyor.
Okullara yönelik politika ikilemi
Bulgular tuhaf bir anda ortaya çıkıyor. Hükümetler ve eğitim teknolojisi firmaları öğrencilerin önüne yapay zeka eğitmenleri koymak için yarışıyor ve kişiselleştirilmiş yapay zeka desteğinin başarı farklarını kapatacağına inanıyor. Bu çalışma, tam tersi sonucun geniş ölçekte mümkün olduğunu ileri sürüyor: Ödevler sorunsuz hale geliyor, notlar artıyor ve bunların altında yatan ölçülen öğrenme sessizce aşınıyor; ancak bunu düzeltmek için çok geç olduğunda fark ediliyor.
Okullar açısından bunun sonuçları somuttur. Eğer ev ödevi artık öğrenmenin kanıtı olarak kullanılamıyorsa, değerlendirme sınıf içinde yapılmalı ve gözetim altında tutulmalıdır. Yapay zeka kullanımı kaçınılmazsa ödevlerin teknoloji etrafında yeniden tasarlanması gerekebilir - sözlü savunmalar, sınıf içi problem oturumları ve çalışmada öğrencilerin atladığı mücadeleyi ödüllendiren süreç bazlı notlandırma. Dış kaynak kullanımı maruziyetle birlikte yoğunlaşırsa, gecikme tarafsız değildir: her ay yapılandırılmamış yapay zeka erişimi alışkanlığı derinleştiriyor gibi görünmektedir.
Araştırmacıların katkısı, sınıfta ChatGPT döneminin anekdot niteliğindeki paniğini boylamsal sayılarla değiştirmektir ve sayılar kasvetlidir. Sınavda yüzde 20'lik bir düşüş karşılığında satın alınan yüzde 18'lik ev ödevi iyileştirmesi bir öğrenme kazancı değildir; bu, faizi sınav gününde ödenecek şekilde işin öğrenciden makineye aktarılmasıdır.
Yapay Zekanın Önünde Kalın
Araştırmalarda çığır açan gelişmeler, politika sonuçları ve eğitimde yapay zekanın dürüst analizi için AI Buzz Wire'a yer işareti koyun.
Daha fazla AI haberini okuyun →
