DeepMind tar et stort sprang mot å tolke LLM'er med sparsomme autoencodere

En ny studie av Google DeepMind viser hvordan sparsomme autoencodere (SAE) med spesiell JumpReLU-aktivasjon kan hjelpe med å tolke LLM (Large Language Models).