Actualités de l'IA et du ML en français

Affinage multi-GPU pour Llama 3.1 70B avec FSDP et QLoRA

Ce que vous pouvez faire avec seulement 2x24 GB de GPU et beaucoup de RAM CPU
towardsdatascience.com
Multi-GPU Fine-tuning for Llama 3.1 70B with FSDP and QLoRA
Create attached notes ...