改写:当网络退化时浅层网络能够达到比深层网络更好的训练效果这时如果我们把低层的特征传到高层那么效果应该至少不比浅层的网络效果差或者说如果一个VGG-100网络在第98层使用的是和VGG-16第14层一模一样的特征那么VGG-100的效果应该会和VGG-16的效果相同。所以我们可以在VGG-100的98层和14层之间添加一条直接映射Identity Mapping来达到此效果。
当网络遇到退化问题时,浅层网络的训练效果可能比深层网络更好。在这种情况下,将低层特征传递到高层,应该至少不会比浅层网络差。例如,如果VGG-100网络的第98层与VGG-16网络的第14层具有相同的特征,那么VGG-100的效果应该与VGG-16相同。因此,我们可以在VGG-100的第98层和第14层之间添加一个直接映射(Identity Mapping),以实现这个效果。
原文地址: https://www.cveoy.top/t/topic/efBi 著作权归作者所有。请勿转载和采集!