Как большие языковые модели превращают текст в числа: пошаговое объяснение BPE-токенизации, почему выбор токенизатора влияет на качество модели и создание конвейера данных.