Bir Profesörün Gözüyle: AI Tarafından Yazılan Bir Makalenin En Büyük Belirtileri

Mark Massaro, uzun yıllardır Florida Southwestern Devlet Kolejinde İngilizce Kompozisyon dersleri veriyor fakat 2023’te işi oldukça zorlaştı. ChatGPT gibi AI uygulamaları herkesin kullanımına açılır açılmaz, ülke genelindeki yükseköğrenim kurumları otomatik kopya dalgasına maruz kaldı. Öğrenciler, yazılı ödevlerinde AI kullanarak yazı yazıyorlar ve bu eğilim giderek artıyor gibi görünüyor. Massaro, sınıfındaki 25 öğrenciden 5’inin ödevlerinin AI tarafından yazılmış gibi göründüğünü ifade ediyor.

ChatGPT ilk çıktığında ve öğrencilerin bunu kopya çekmek için kullandığı belli olduğunda, Massaro gün içinde pek çok ödevi çeşitli AI tarayıcılarından geçiriyordu. Çoğunluğu ödevi AI tarafından yazılmış olarak etiketliyorsa, buna inanıyordu. Fakat şimdi ise okul, öğrencilerin çalışmalarını bu tür uygulamalara yüklemelerine izin vermiyor çünkü bu onların mahremiyetini ihlal edebilir. Üstelik, AI detektörlerinin doğruluğu da güvenilir değil.

Bu sebeple Massaro, bir ödevin yasalara uygun şekilde yaratılıp yaratılmadığını değerlendirirken kendi zekasına güvenmek zorunda olduğunu söylüyor. Bunun için, bir ödevin AI ile yazıldığına dair ipuçlarından oluşan bir kontrol listesi hazırlamış. Ödevler geldiği zaman bu listeye başvuruyor. O, bu kırmızı bayraklardan bazılarını Gizmodo ile paylaştı ve AI’nin Amerika eğitimcilerine dayattığı zor durumu daha net bir şekilde ortaya koydu.

Çok Fazla Sen-Çizgisi

Bir ödevin AI tarafından yazıldığını gösteren işaretlerden biri, çok fazla sen-çizgisi (em-dash) kullanılmasıdır. Neden bilinmez, ChatGPT gibi uygulamalar sıkça bunlardan kullanıyor. Massaro, bu durumdan şüphelendiğinde öğrenciyi yanına çağırarak bilgisayarda sen-çizgisi üretmelerini istiyor. Genellikle, öğrenci bunun nasıl yapıldığını bile bilmiyor. “Ödevinde dolu sen-çizgisi var, bana nasıl yaptığını göster,” diyor. Eğer öğrenci sıkıntı yaşıyorsa, olayın ne olduğunu anlamak zor değil, diye devam ediyor.

Girinti Yokluğu

Massaro, geleneksel üniversite denemelerinin stil gerekliliklerinin aksine, chatbot’lardan kopyalanıp yapıştırılan metinlerin paragraf girintileri olmadığını söylüyor. ChatGPT ve benzerlerinin çıktıları belirgin bir şekilde girintiye ihtiyaç duymuyor. Öğrencinin ödevinde büyük bloklar şeklinde metinler varsa, büyük olasılıkla robot yazmıştır.

Mükemmel Dilbilgisi ve Yüzeysel İçerik

Eğer bir öğrenci kusursuz sözcüklerle dolu, fakat özde fazla bir şey söylemeyen bir ödev sunarsa, Massaro’ya göre bu, algoritmik üretim olduğuna dair bir ipucu olabilir. İyi yazan ama orijinal düşünce yoksunu öğrenciler olsa da, otomatik üretilmiş yazı, zamanla görünür hale gelen bazı işaretlere sahiptir. Massaro, AI tarzını “tekdüze cümle ve paragraf uzunluğu” olarak tanımlıyor, burada her “paragraf hemen hemen aynı boyutta ve ritmik, mekanik bir his verir.” Yazı, “çok fazla cilalanmış akademik bir ses” ile de karakterize edilir ve bu, öğrenci çalışmalarından beklenmeyen bir durumdur.

Taslak Geçmişi Yok

Başka bir kırmızı bayrak ise öğrencinin sınıf içi taslak sürecine hiç katılmamasıdır, diyor Massaro. Kompozisyon derslerinin bir parçası olarak, Massaro öğrenciler arası geri bildirim oturumları ve konferanslar düzenliyor. Öğrenci bazen de okulun Yazı Merkezi ile görüştüğünü iddia edebilir fakat gerçekte bunu yapmamıştır. Öğrenciler bu ödevleri teslim ettiklerinde, “öğrenci için alışılmadık kelimeler” içerebilir ve “önceki çalışmalarda veya sınıf tartışmalarında görülmeyen ani zekâ sıçramaları” ile karakterize edilebilir.

Kişisel Olmayan Yazım

Massaro, bazen öğrencilere kişisel değerlendirme yazıları verdiklerini söyledi. Yerel bir 7-Eleven’da çalışmaya dayalı bir değerlendirmeyi gerçekten yazmış bir öğrenci, AI’nin asla düşünemeyeceği sıra dışı kişisel ayrıntıları ekleyecektir, dedi. Öte yandan, yazı AI tarafından otomatik olarak üretilmişse, insanlık için “dostluğun” öneminden soyut bir şekilde bahsedebilir, dedi gülerek.

Kalan Prompt Girişleri

Şaşırtıcı bir şekilde, öğrenciler kopyalarında o kadar dikkatsiz davranıyorlar ki, chatbottan olan interaksiyonlarındaki prompt girişlerini teslim edilen son ödevde bırakıyorlar, diyor Massaro.

Yanlış Atıflar

AI’nin “halisünasyon” bilgiyi üretme alışkanlığı iyi bilinir. Bir öğrencinin yazısında, bu AI kaynaklı atıflar, düpedüz yanlış veya uydurma bilgiler ve sahte atıflar şeklinde kendini gösterecektir. Bu, Massaro için makalede yer alan belirgin olmayan bir bilginin gerçek mi değil mi olduğunu tespit etmek için ek saatler süren çalışmalar yaratabilir. Bu bazen, öğrencinin makalesinde atıfta bulunulan ancak sahte oldukları için kaynakçada yer almayan gerçek akademik dergiler ve kitapları da gözden geçirmeyi içeriyor.

Öğrenciyi kopya hakkında hakkında sorgulamak, garip ve zor olabilir, diyor Massaro, ancak genellikle olanları anlamak kolaydır diyor. Çoğu zaman, suçlu bir öğrenci AI kullandığını itiraf eder ya da Massaro’nun e-posta ile gönderilen sorularına yanıt vermez (birçok öğrencisi uzaktan eğitim almakta). Masum olan öğrenciler genellikle karşı çıkarlar ve Massaro onlara inanmaya eğilimlidir.

AI yazılımının yükselişinde en büyük hayal kırıklığı, öğrencilerin kendi entelektüel ve yaratıcı kimliklerini geliştirme yeteneklerini ellerinden almasıdır, diyor. “Bu, kendi seslerini buldukları zaman olmalıydı,” diyor. Ancak AI onlar için konuşuyor (ve düşünüyor).