Knowledge Distillation

Dark Knowledge

Informations subtiles contenues dans les probabilités de sortie du teacher model qui révèlent les similarités entre classes et ne sont pas présentes dans les labels durs.

← Retour