AI Flooded Scientific Journals with Papers—and That's Not Necessarily Good Yet
OpenAI
Alibaba/Qwen
The spread of generative AI has sharply increased the flow of scientific papers while reducing their quality. An analysis of the journal Organization Science showed that after the release of ChatGPT, the number of submissions rose by 42%, and papers with a high degree of AI involvement were rejected in 70% of cases. However, AI can be useful when combined with human review and a reformed evaluation system.
Редакционная группа журнала Organization Science проанализировала 6957 заявок и 10389 рецензий с января 2021 по февраль 2026 года. После появления ChatGPT в конце 2022 года количество заявок выросло на 42%, а к февралю 2026 года ИИ использовался при написании большинства статей. Для оценки применялся алгоритм Pangram 3.1, индекс удобочитаемости Флеша снизился на 1,28 стандартного отклонения. Работы с показателем участия ИИ свыше 70% отклонялись редакторами в 70% случаев, а тексты с минимальным использованием ИИ — лишь в 43,7%. Рецензии, подготовленные ИИ, были менее разнообразными: в них чаще обсуждались теоретические рамки, но меньше внимания уделялось данным и методам. Однако эксперимент группы Джеймса Эванса показал, что более продвинутые модели могут предлагать удивительно новые идеи. Модель Qwen3-14B, обученная на рецензиях учёных, превзошла универсальные модели на 27%. Учёные приходят к выводу, что ИИ полезен, но требует проверки человеком и изменения системы оценки.
Source: 3DNews —
original
