Содержание
Почему AI-детекторам сложнее распознать имитацию авторского стиля
Epoch AI протестировала три популярных сервиса для распознавания сгенерированного текста — Pangram, GPTZero и Originality.ai. Пока нейросети отвечали на обычные короткие промпты, детекторы работали почти безошибочно: доля пропущенных AI-текстов не превышала 0,7%.
Имитация стиля резко меняет результат
Во второй части эксперимента Claude Opus 4.8, GPT-5.5 и Gemini 3.1 Pro получили по пять примеров работ конкретного автора и должны были написать новый текст в похожей манере. В этом сценарии Pangram не распознал 10% генераций, GPTZero — 11%, а Originality.ai — 18%.
Особенно слабым местом стали научные тексты: в среднем детекторы пропускали от 24% до 29% стилизованных генераций. В отдельных комбинациях модели и детектора ошибка доходила до 48%. При этом на 495 проверенных человеческих фрагментах Pangram и GPTZero не дали ложных срабатываний, а Originality.ai ошибочно пометил как AI около 4% материалов.
Как проводили проверку
Исследователи собрали корпус из 495 фрагментов 99 авторов — блогеров, писателей и ученых. Все человеческие тексты были опубликованы до запуска ChatGPT, поэтому современная генеративная модель не могла участвовать в их создании. Для AI-части подготовили по 297 материалов из обычных промптов и с имитацией стиля; данные, код и ответы детекторов опубликованы для повторной проверки.
Что это значит для авторов и бизнеса
Результат не доказывает, что AI-детекторы бесполезны: на простых генерациях они показали высокую точность. Но их вердикт нельзя считать самостоятельным доказательством авторства, особенно для научных, экспертных и брендовых текстов с устойчивым стилем. Редакциям, преподавателям и компаниям разумнее сочетать детектор с проверкой источников, истории правок и фактической точности материала.