Краткий пересказ текста нейросетью: что теряется первым
При сжатии модель первыми выбрасывает оговорки, исключения и числа — то, ради чего документ читают внимательно. Поэтому вместо пересказа я прошу ответы на свои вопросы с цитатой.
Короткий ответ: краткий пересказ, или суммаризацию текста, нейросеть делает гладко, но при сжатии первыми выбрасывает оговорки, условия, исключения и точные числа. Остаётся общий смысл, изложенный ровно и уверенно, и пропуск не виден. Если текст нужен для решения, просите не пересказ, а ответы на свои вопросы с указанием места в тексте.
Почему теряется именно это. Сжатие оставляет то, на чём держится основная мысль документа. Фраза «кроме случаев, указанных в приложении» встречается один раз, мысль не держит и при сокращении выглядит лишней. Но договор, регламент или отчёт читают внимательно как раз ради неё: общий смысл читатель обычно знал и до того.
Это не только мой опыт. В исследовании 2025 года сравнивали пересказы научных статей, сделанные моделями, с исходными текстами: сказанное о конкретной группе пациентов в пересказе нередко превращалось в утверждение обо всех. А просьба пересказать без неточностей делала такие обобщения примерно вдвое вероятнее, чем простая просьба пересказать.
Пропуск не заметен. Выдуманный факт иногда режет глаз. Выпавшее исключение не режет ничего: текст связный, тон тот же, что у верного пересказа, а уверенность формулировки ничего не говорит о полноте. Заметить пропуск можно, только прочитав оригинал, — то есть сделав работу, от которой пересказ избавлял.
Приём. Вместо «перескажи кратко» я пишу вопросы, ради которых открыл документ: какой срок, при каких условиях он меняется, какие исключения, какие суммы. К каждому ответу — цитата и номер пункта или страницы, пустой ответ разрешён явно. Проверка сводится к сверке двух строк, как при извлечении условий из договоров.
Слабость приёма: о чём не спросил, того не узнаешь. Поэтому последним я добавляю вопрос «какие условия и исключения в тексте ограничивают ответы выше». Модель находит не все, но это уже поиск по тексту, а не сжатие.
Где правило лишнее. Если пересказ нужен, чтобы решить, читать ли статью целиком, потеря оговорок почти ничего не стоит. Опаснее, когда пересказ становится входом для следующего шага: сжатая история разговора агента теряет исключения так же, и обнаруживается это позже. Там уже некому заметить, что условие пропало, — следующий шаг работает с тем, что осталось.