作者 | Derrick Mwiti 译者 | 刘畅 编辑 | Jane 出品 | AI科技大本营（ID：rgznai100） 【导语】知识蒸馏是一种模型压缩技术，它利用训练好的大网络（教师网络）去教小网络（学生网络）。较小的网络经过训练后，可有类似于大网络的性能。这样就可以在诸如手机或其他移动端设备等小型设备上部署此类模型。在今天的文章中，将为大家介绍关于几个重要的知识蒸馏的工