Destillation

Erklärung

Das Verfahren, Wissen aus einem großen Modell in ein kleineres Modell zu übertragen.


Beispiel

Bei der Destillation werden überflüssige Informationen weggelassen, um die Effizienz eines Modells zu steigern.