もっと詳しく

3つの要点 ?? 知識蒸留を成功させる効果的な方法について検討 ?? 一貫した(consistent)・忍耐強い(patient)教師が重要であることを特定 ?? ResNet-50モデルでImageNet 82.8%のTop-1精度を達成 Knowledge distillation: A good teacher is patient and consistent written by Lucas Beyer, Xiaohua Zhai…