搞懂深度学习中的 residual blocks(残差块)看这一篇文章就够了!!!

残差块包括skip connection
搞懂深度学习中的 residual blocks(残差块)看这一篇文章就够了!!!_第1张图片

文章目录

    • 一、什么是残差块?
    • 二、残差块原理

一、什么是残差块?

所谓的残差网络其实就是由若干残差块(residual block)组成的网络
搞懂深度学习中的 residual blocks(残差块)看这一篇文章就够了!!!_第2张图片
如上图所示,现在考虑第l、l+1、l+2层。
a[l]是第l层的输出,在普通的神经网络中,要经过l+1层的计算和放大,才会进入到l+2层。

而在残差块中,除了上面的正常的计算,还会把a[l]直接传输到l+2层,使得<

你可能感兴趣的:(深度学习:rasidual,blocks(残差块))