Если ИИ не мыслит, то как он решает математические задачи?

Утверждение о том, что языковые модели лишь предсказывают следующий токен, часто натыкается на скепсис: как тогда ИИ решает сложные уравнения? Кажется, что внутри скрыт вычислительный модуль, но всё устроено иначе.

Нейросети воспринимают арифметику как лингвистический паттерн. Если в обучающей выборке сочетание «5 + 5 =» всегда завершается символом «10», модель воспроизводит эту последовательность. Вычисления — это не работа формул, а результат статистической вероятности появления токенов в контексте.

Рассмотрим механизмы, превращающие предсказание текста в имитацию логики.

Тот момент когда выбрал не те ценности..