HackerNoon 한국어 팔로우 우리만의 LLM 구축하기 (1부): 토큰화 및 데이터 준비 LLM이 텍스트를 숫자로 변환하는 방법: BPE 토큰화 단계별 설명, 토크나이저 선택이 모델 품질에 영향을 미치는 이유, 데이터 파이프라인 구축. Let's Build Our Own LLM (Part 1): Tokenization and Data Prep hackernoon.com HackerNoon 한국어 RSS thenote.app