Опубликовано
Иллюзия понимания
Автор: Гусев Николай [портфолио]
Дата обновления не указана в исходнике.
Иллюзия понимания Сложность: средняя
LLM не читает текст. Она не видит букв и не знает, что такое слово. Она видит токены — числа из словаря токенизатора. И от того, какие именно числа, зависит всё: сколько контекста поместится, заметит ли модель опечатку, поймёт ли многозначность.
Третья часть цикла о том, как устроены LLM на самом деле. Токенизация (почему русский дороже английского, а китайский — эффективнее обоих), генерация как лотерея (температура, top-k, top-p), и пять слоёв иллюзии понимания — от токена до статичности.
🌐 hermes-agent.ru ℹ️ Хотите попробовать, но нет времени разбираться? Напишите в контакты на сайте — поможем с настройкой и подбором сценария под ваши задачи.