Используем C для исследования LLM-мира • Шаг первый — токенизация • Live coding

Это же просто… Это же на самом деле… Это же только… Ну, же не же, а разобраться руками хочется: что там у LLM под капотом, как это всё руками дёргать и глазами видеть? Вот и подёргаем. Всё локально, всё летает на слабеньких машинах. Потребуется честный C, в том числе структуры, указатели и динамическая память. Ну а первую LLM-модель вам, конечно, придётся добыть в бою — с другими тремя буквами наперевес.