Distillation

Techniek waarbij een klein 'studentmodel' wordt getraind om het gedrag van een groot 'leraarmodel' na te bootsen. Levert kleinere, snellere modellen op met behoud van veel kwaliteit.