是正则化,而且还不是一般的正则化,更不是优化的假设,也不是边际分布所能解释的。是某种特殊的先验分布带来的正则化。而且这种正则化项,和early stopping以及semi-superviesed的原理比较相似。
深度神经网络预训练的本质
最后编辑于 :
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
推荐阅读更多精彩内容
- Neil Zhu,简书ID Not_GOD,University AI 创始人 & Chief Scientist...
- 本系列文章面向深度学习研发者,希望通过Image Caption Generation,一个有意思的具体任务,深入...