Văn bản của bạn không vượt qua được bộ phát hiện AI: Một thử nghiệm với văn bản tiếng Nga
Anthropic
Moonshot AI
OpenAI
DeepSeek
Сбер
Яндекс
Text.ru
GPTZero
Một thử nghiệm đã kiểm tra bốn bộ phát hiện AI đối với các văn bản do sáu mô hình ngôn ngữ lớn tạo ra và văn bản do con người viết bằng tiếng Nga. Kết quả cho thấy các bộ phát hiện gặp khó khăn với văn bản ngắn và có 'điểm mù' đối với một số mô hình nhất định. Bài viết thảo luận về các nguyên tắc đằng sau việc phát hiện AI và tranh cãi xung quanh độ chính xác của nó.
Статья из AI-хаба Habr исследует рост контента, созданного ИИ, и распространение AI-детекторов. В ней отмечается исследование Graphite, показавшее, что в ноябре 2024 года тексты, сгенерированные ИИ, численно превзошли написанные людьми, а обновлённое исследование весной 2026 года заявило о паритете. Автор описывает, как работают типичные детекторы, приводя в пример Нейродетектор Яндекса и AI-детектор Text.ru, и упоминает, что OpenAI закрыла свой классификатор в 2023 году из-за низкой точности. GigaCheck от Сбера, основанный на доработанной модели Mistral, заявляет о точности 94,7%. В эксперименте использовались четыре детектора (Нейродетектор Яндекса, GigaCheck, AI-детектор Text.ru, GPTZero) и шесть LLM (Claude Opus 5, Kimi K3, GPT-5.6 Sol, GLM 5.2, DeepSeek V4 Pro, GigaChat 3.5 Ultra). В качестве контрольной группы использовались три написанных человеком текста о панграммах, опубликованных до 2021 года. Модели генерировали тексты сопоставимой длины, и все тексты были проверены каждым детектором по одному разу. Результаты были нормализованы по категориям «ИИ/Человек». Автор признаёт ограничения: небольшая выборка, однократный прогон и дата 27 июля 2026 года. Результаты показывают, что более длинные тексты классифицируются точнее, в то время как короткие тексты вызывают больше ошибок. Примечательно, что Нейродетектор Яндекса ошибочно классифицировал три текста Claude Opus 5 как написанные человеком, а Text.ru ошибочно пометил тексты GPT-5.6 Sol как человеческие, что указывает на «слепые зоны». Статья воздерживается от рекомендаций какого-либо детектора.
Nguồn: Habr — хаб ИИ —
bản gốc