AI membanjiri jurnal ilmiah dengan artikel — dan sejauh ini tidak banyak hal baik tentangnya

Tim editorial jurnal Organization Science menganalisis 6.957 kiriman dan 10.389 ulasan yang diterima dari Januari 2021 hingga Februari 2026. Kemunculan ChatGPT pada akhir tahun 2022 bertepatan dengan lonjakan tajam jumlah kiriman dan penurunan kualitas. Setelah penyebaran ChatGPT, jumlah kiriman meningkat 42%, dan pada Februari 2026, kecerdasan buatan (AI) kemungkinan besar telah digunakan dalam beberapa bentuk di sebagian besar artikel yang dikirim. Menggunakan algoritme Pangram 3.1 untuk mendeteksi teks mesin, peneliti menemukan bahwa rata-rata keterbacaan (indeks Flesch) turun 1,28 simpangan baku pada Januari 2026 dibandingkan dengan Januari 2021. Makalah dengan indeks partisipasi AI di atas 70% ditolak dalam 70% kasus sebelum peninjauan sejawat, sementara yang menggunakan AI secara minimal hanya ditolak 43,7% dari waktu ke waktu. Peluang menerima permintaan revisi turun dari 11,9% menjadi 3,2% untuk makalah dengan penggunaan AI yang berat. Model statistik menunjukkan bahwa tingkat penolakan yang lebih tinggi tetap ada bahkan untuk teks yang disempurnakan secara gaya, menunjukkan konten ilmiah yang buruk. Ulasan yang dihasilkan AI kurang beragam, lebih berfokus pada kerangka teoretis dan kurang pada data, metode, serta hasil. Para penulis mencatat bahwa algoritme tidak dapat secara andal mengidentifikasi pengaruh AI, sehingga hanya tren umum yang dibahas. Namun, sebuah eksperimen besar oleh James Evans meminta para ilmuwan mengevaluasi ide yang dihasilkan model bahasa: 6.749 ilmuwan memberikan lebih dari 25.000 penilaian tentang kebaruan, nilai praktis, dan masuk akal. Model populer sering menyarankan ide yang mirip, sementara model yang lebih canggih dapat mengejutkan dengan kebaruannya. Pengulas AI sering tidak setuju dengan pakar manusia. Model Qwen3-14B, yang dilatih secara khusus pada ulasan yang ditulis ilmuwan, mengungguli model tujuan umum hingga 27%. Para peneliti menyimpulkan bahwa AI sudah membantu pencarian data, pemrograman, dan persiapan teks, tetapi tanpa verifikasi manusia dan perubahan dalam sistem evaluasi, AI dapat menyebabkan pertumbuhan publikasi yang tidak terkendali alih-alih peningkatan pengetahuan baru.