Исследование оценило эффективность детекторов ИИ, включая «Думейт», GPTZero и «Антиплагиат» (версия 1.8.2), при проверке текстов объемом 11–12 тысяч знаков. В ходе эксперимента применялись методы ИИ-редактирования и перевода (RU-EN, EN-RU и двойной перевод).
Результаты показали, что инструменты ИИ-доработки не позволяют выдать машинный текст за человеческий. Для сгенерированного контента снижение показателей ИИ в «Думейте» составило менее 3%. При этом попытки «улучшить» человеческий текст с помощью ИИ могут привести к ложноположительным результатам: «Думейт» показал 51,1% ИИ-доли после двойного перевода.
Анализ трех работ одного автора за 2024–2026 годы выявил рост доли ИИ-текста с 0% до 56% по версии GPTZero и с 12,5% до 70% по оценке «Думейта». Автор исследования отмечает, что использование ИИ для редактирования работ лишь повышает риск их ошибочной идентификации как сгенерированных.
Детекторы демонстрируют наибольшую точность при проверке текстов на «родном» языке. GPTZero эффективно распознает английские тексты, тогда как «Думейт» показал слабую компетентность в этом вопросе. Автор рекомендует избегать ИИ-сервисов для правки академических текстов, чтобы не провоцировать ложные срабатывания систем.
