【AI Drive】第84期 - 中科院杨传广：自监督增强的知识蒸馏

本期为biendata第123期线上分享的内容回顾。 9月16日（周四）19点，AI Drive邀中科院计算书在读博士生-杨传广，为大家带来“IJCAI 2021：自监督增强的知识蒸馏”主题演讲。主要介绍了一种自监督增强的任务来引导教师网络和学生网络学习自监督增强的知识，该知识中包含了有监督分类任务和无监督辅助任务的联合知识。以及原始网络结构上引入了多个辅助分支来引导自监督增强知识的迁移。在图像分类上的标准benchmark上验证了提出的方法超过了先前的最好方法。