Пределы обнаружения текста, написанного ИИ

У текста нет ни EXIF, ни подписи. Остаются только фразы, а фразы теряют следы, как только их перепишут. Обнаружение текста ИИ не даёт той определённости, что даёт анализ изображения, и не скрывать это — первое правило данной функции.

Что на самом деле говорят стилометрические меры

Разброс длины предложений, лексическое разнообразие и частота определённых связок показывают статистические тенденции. Тенденция — не вердикт об отдельном документе. Люди тоже так пишут, а формальные отчёты и переводная проза лежат к этой тенденции особенно близко.

Где это опаснее всего

Короткие тексты, тексты с обилием цитат, машинные переводы и написанное неносителями языка дают ложные срабатывания в одну и ту же сторону. Понятно и кому от этого вред. Поэтому правило запрещает в этих условиях выносить вердикт ИИ по одной лишь стилометрии.

Что в тексте всё-таки проверяемо

С файлом документа дело обстоит иначе. История правок, инструмент создания, идентификаторы сессий редактирования и реальность процитированных источников проверяются независимо от стиля. Документ, ссылающийся на несуществующий источник, сам по себе сильная зацепка.

От чего мы поэтому отказались

Никаких категоричных формулировок о написанном, а если единственное основание стилометрическое — результат «неопределённо». Это не создавалось, чтобы в одиночку судить о студенте или кандидате. Результат — начало разговора, а не его конец.

Частые вопросы

Какой длины нужен текст?
Чем короче, тем вероятнее «неопределённо». Разумный нижний предел — около 200 знаков, но длина сама по себе ничего не гарантирует.
А черновик ИИ, переписанный человеком?
Это самый трудный случай, и обычно получается «неопределённо». Смешанный текст мы не подталкиваем ни в одну сторону.
Работает ли это на русском?
Работает на всех двенадцати поддерживаемых языках. Перечисленные выше пределы действуют в каждом из них одинаково.
Можно ли использовать результат в дисциплинарном деле?
Не советуем. Это вероятностная оценка, а не доказательство. Используйте её, чтобы упорядочить, что проверить, а решение оставьте человеку.

Читать дальше

Это общее пояснение, а не юридическая консультация. Результат проверки — вероятностная оценка, а не доказательство.

Попробовать на файле