Наше письмо: 93 % и 0 % на одном тексте
26 октября 2026 года мы прогнали три своих текста через два детектора. На обычном деловом письме они разошлись на 93 процентных пункта. Публикуем, потому что эта цифра неудобна для нас самих.
Что произошло
Один день, три русских текста, полные распечатки сохранены. Детекторы — Pangram 4.1 и российский Текстовод.
Первым шло письмо оценщику — то самое, которым мы просили посчитать стоимость комплекса. 185 слов, подано целиком. Pangram вернул 93 % с пометкой, что концовка написана человеком. Текстовод — 0 % и слово «человек».
Вторым — письмо самого оценщика. 99 слов, вставлено из чата, подписано человеком, с одной и той же опиской дважды. Pangram: «возможно, человек, 100 %».
Третьим — контрольное письмо, которое модель написала целиком, около 180 слов. Но в интерфейс попала выдержка в 73 слова. Pangram дал «возможно, ИИ, 100 %» — и сам пометил, что короткий текст классифицирует хуже.
Три наблюдения
Расхождение в 93 процентных пункта. Два детектора на одном и том же человеческом тексте: один сказал «почти наверняка машина», другой — «человек». Это не сбой: инструменты обучены на разных данных, под разные языки и разные длины. Но в разговоре о «детекторе» эта разница обычно исчезает.
Мы сами чуть не создали ложный факт. Контрольный текст был около 180 слов, а на проверку ушла выдержка в 73. Если бы мы не записали длину, в отчёте осталось бы «100 % ИИ» — и никто, включая нас, не восстановил бы, что проверяли не текст, а его кусок. Поправку опубликовали отдельным разделом в research note, а не переписали молча.
Мы умеем писать так, что детектор считает нас машиной. 93 % — это про наш стиль, а не про нашу добросовестность.
Стоит ли менять стиль?
Мы решили, что нет. Но и делать вид, что цифры не было, не будем.
Для нас вывод практический: протокол дешевле спора. Записать, какой текст, какой длины, в какой версии детектора и когда — это несколько строк, которые потом и есть доказательство. Без них остаётся «прибор сказал»; с ними — проверяемый факт.
Хронология
- 26.10.2026 — прогон трёх текстов, два детектора, полные распечатки.
- 27.10.2026 — письмо в Pangram с выдержкой 73 слова из письма около 180 слов; сервис пометил именно короткий текст.
- 31.10.2026 — расхождение «73 слова против 180» разобрано и опубликовано как Correction в research note о российских детекторах: это не два замера, а два объекта.
- 01.11.2026 — этот материал.
Дальше в рубрике
Второй материал — российский случай с публичными документами: там есть решение, есть дата и есть что проверять — «Четыре постановления, которых нет». Зарубежные герои — после регистрации организации: писать им сейчас нельзя, и мы это правило не обходим.
Источники: протокол прогона 26.10.2026 (наш архив); Pangram, версия 4.1; Текстовод (PRO); дайджест № 7 «Вердикт без закона»; research note о российских детекторах с разделом Correction.