실험들

트랜스포머에서 조기에 가지치기된 조기 도착 하위 네트워크는 메모리를 최대 49%까지 줄이면서 성능을 유지하여 ViT와 GPT-2 전반에 걸쳐 더 빠른 훈련 전략의 타당성을 입증합니다.