人工智能面试总结-初始化与归一化

在这里插入图片描述
B站:啥都会一点的研究生

公众号试读:啥都会一点的研究生

目录

  • 说说什么是网络参数初始化?
  • 说说为什么需要合理的参数初始化?
  • 说说理想的参数初始化应该是什么?
  • 说说你知道的初始化方法?
  • 说说全0初始化?
  • 说说等值初始化?
  • 说说随机初始化?
  • 说说随机初始化缺陷?
  • 说说Xavier初始化?
  • 说说He初始化?
  • 用公式说明梯度消失与梯度爆炸(手推)?
  • 说说为什么要归一化?
  • 说说为什么归一化能提高最优解的求解速度?
  • 说说归一化的类型?

你可能感兴趣的:(深度学习,机器学习面试总结,机器学习,人工智能,面试,深度学习,神经网络)