Детекторы ИИ-текста: как работают и насколько точны
Вузы, школы и редакции всё чаще проверяют тексты детекторами ИИ. Но эти инструменты далеко не так точны, как обещают. Разбираемся, как они работают и как защитить себя, если вас обвинили несправедливо.
Как работают детекторы
Детекторы не понимают смысл текста. Они смотрят на статистические признаки: насколько предсказуемы слова, насколько ровный ритм предложений, как часто встречаются типичные для нейросетей обороты. Нейросеть пишет «гладко», и детектор ищет эту гладкость.
Проблема в том, что аккуратный формальный текст, написанный человеком, тоже бывает гладким. Поэтому ложные срабатывания неизбежны.
Насколько им можно доверять
- OpenAI в 2023 году закрыла свой классификатор: он находил лишь около 26% машинных текстов и при этом записывал в машинные 9% человеческих.
- В исследовании Стэнфорда эссе авторов, для которых английский неродной, детекторы в среднем признавали машинными в 61% случаев.
- Некоторые университеты за рубежом отключили ИИ-проверку из-за риска ложных обвинений.
Вывод: детектор может быть поводом присмотреться к работе, но не доказательством.
Что в российских вузах
Многие вузы проверяют работы через системы антиплагиата, в которых есть модули поиска ИИ-текста. Подробнее — в статье антиплагиат и нейросети.
Как защитить себя
- Сохраняйте черновики. Работайте в документе с историей версий — это лучшее доказательство авторства.
- Сохраняйте заметки и источники, по которым писали.
- Будьте готовы объяснить работу устно. Автор всегда может рассказать, почему написал так, а не иначе.
- Узнайте правила использования ИИ в вашем учебном заведении.
Если вас обвинили
Спокойно попросите показать отчёт проверки, предложите историю правок документа и устное обсуждение. Сошлитесь на то, что детекторы признаны ненадёжными для вынесения решений сами по себе.
Коротко
Детекторы ИИ-текста часто ошибаются и не являются доказательством. Лучшая защита — честная работа, черновики с историей правок и готовность объяснить текст.
Частые вопросы
Насколько точны детекторы ИИ-текста?
Не очень. Например, OpenAI закрыла свой классификатор: он находил лишь около четверти машинных текстов и ошибочно помечал часть человеческих. Вердикт детектора — подсказка, а не доказательство.
Почему детектор признал мой текст написанным ИИ?
Детекторы реагируют на предсказуемый, гладкий и формальный стиль. Такой текст может написать и человек — особенно в научном стиле или на неродном языке.
Что делать, если текст ошибочно признали ИИ?
Покажите черновики и историю правок, предложите обсудить работу устно. Это лучшие доказательства авторства.