蒸馏的本质是什么,能够工作的基本原理是什么?什么情况下不能工作?
答主
薛子慧
德克萨斯大学奥斯汀分校在读博士
就是我们刚刚知识蒸馏,我觉得他就是他想要解决的事情就是他的idea就是我们可以在两个网络之间去实现knowledge transfer,那么能够工作就是有其实有很多就是我们去探索,就这样一简单的objective这样一个简单的loss为什么可以去实现这样knowledge transfer然后这里也有很多series paper去探讨,也...
问题来源:知识蒸馏在多模态和跨模态中的应用
其他回答
发布
网友答案仅供其表达个人看法,并不表明智猩猩立场。