Клодизмы: как языковые модели теряют нить текста и что с этим делать
Преподаватель английского с 35-летним стажем несколько месяцев писал учебные материалы вместе с языковой моделью Claude и собрал более сотни повторяющихся ошибок, которые назвал «клодизмами». Разбор показал: причина не в грамматике, а в том, как модель воспринимает текст.
Главное
- Модель воспринимает текст целиком, читатель — линейно, отсюда обрывы мысли
- Частотная подстановка заменяет точные слова на самые распространённые
- Десять классов клодизмов различаются механизмом, а не внешним видом
- Гладкий текст модели может не объяснять из-за пропущенных связей
Преподаватель английского с 35-летним стажем несколько месяцев писал учебные материалы вместе с языковой моделью Claude и собрал более сотни повторяющихся ошибок, которые назвал «клодизмами». Разбор показал: причина не в грамматике, а в том, как модель воспринимает текст.
Модель видит весь контекст целиком, как картину, и не различает «до» и «после». Для неё недостающая часть фразы всегда «где-то рядом» — в соседнем абзаце или в задании, поэтому она считает мысль высказанной. Читатель же идёт по тексту линейно и спотыкается на каждом обрубке. Отсюда — эллипсисы, анафоры без антецедента и субъектные сдвиги, когда действие приписывается не тому лицу.
Второй источник клодизмов — частотность: на месте точного слова модель ставит самое частое в окружении. Это даёт десемантизированные глаголы, бытовые слова вместо терминов и определения, которые ничего не добавляют. Автор выделил десять классов таких ошибок, различающихся механизмом, а не внешним видом, и предложил признаки для их обнаружения при чтении.
Практический вывод: гладкий текст модели не гарантирует объяснительной силы. Для учебных и инструктивных материалов нужна дополнительная проверка на связность с точки зрения линейного читателя.