Yapay Zeka Bilimsel Dergileri Makalelerle Doldurdu – Şimdilik Bunun Pek Faydası Yok

Organization Science dergisinin editör ekibi, Ocak 2021 ile Şubat 2026 arasında alınan 6.957 başvuru ve 10.389 incelemeyi analiz etti. ChatGPT'nin 2022 sonlarında ortaya çıkışı, başvurularda keskin bir artış ve kalitede düşüşle aynı döneme denk geldi. ChatGPT'nin yaygınlaşmasından sonra başvurular %42 arttı ve Şubat 2026 itibarıyla gönderilen makalelerin çoğunda muhtemelen bir şekilde yapay zeka (YZ) kullanıldı. Makine metnini tespit etmek için Pangram 3.1 algoritmasını kullanan araştırmacılar, Ocak 2021'e kıyasla Ocak 2026'da ortalama okunabilirliğin (Flesch indeksi) 1,28 standart sapma düştüğünü buldu. YZ katılım endeksi %70'in üzerinde olan makaleler, akran değerlendirmesinden önce vakaların %70'inde reddedilirken, minimal YZ kullanımı olan makaleler yalnızca %43,7 oranında reddedildi. Yoğun YZ kullanımı olan makaleler için revizyon talebi alma şansı %11,9'dan %3,2'ye düştü. İstatistiksel modeller, daha yüksek reddetme oranının üslup açısından cilalanmış metinler için bile devam ettiğini ve bunun zayıf bilimsel içeriğe işaret ettiğini gösterdi. YZ tarafından oluşturulan incelemeler daha az çeşitlilik gösteriyor, teorik çerçevelere daha fazla, veri, yöntem ve sonuçlara daha az odaklanıyordu. Yazarlar, algoritmaların YZ etkisini güvenilir bir şekilde tanımlayamadığını, bu nedenle yalnızca genel eğilimlerin tartışıldığını belirtiyor. Bununla birlikte, James Evans tarafından yapılan büyük bir deneyde araştırmacılar, dil modelleri tarafından üretilen fikirleri değerlendirdi: 6.749 bilim insanı, yenilik, pratik değer ve makuliyet üzerine 25.000'den fazla puanlama yaptı. Popüler modeller genellikle benzer fikirler önerirken, daha gelişmiş modeller yenilikle şaşırtabiliyordu. YZ değerlendiricileri genellikle insan uzmanlarla aynı fikirde değildi. Bilim insanı yazılı incelemeler üzerinde özel olarak eğitilmiş Qwen3-14B modeli, genel amaçlı modellerden %27'ye kadar daha iyi performans gösterdi. Araştırmacılar, YZ'nin halihazırda veri arama, programlama ve metin hazırlamaya yardımcı olduğu, ancak insan doğrulaması ve değerlendirme sisteminde değişiklik olmadan, yeni bilgi artışından ziyade yayınlarda kötü kontrol edilen bir büyümeye yol açabileceği sonucuna varıyor.