2022最新版-李宏毅机器学习深度学习课程-P23 为什么用了验证集结果还是过拟合

用了验证集还有可能会过拟合

这个片段可以从理论上证明这一点

2022最新版-李宏毅机器学习深度学习课程-P23 为什么用了验证集结果还是过拟合_第1张图片

以上整个挑选模型的过程也可以想象为一种训练

把三个模型导出的最小损失公式看成一个集合,现在要做的就是在这个集合中找到某个h(此处可以视为训练),使得在验证集上的损失最低

2022最新版-李宏毅机器学习深度学习课程-P23 为什么用了验证集结果还是过拟合_第2张图片

抽到不好的训练数据时,理想和现实会有差距。

训练数据不好的原因:

  • 训练资料的大小
  • 模型的复杂程度(越复杂,结果越糟的可能性越大)

当拿到的验证集不好时,理想和现实会有差距。

拿到的验证集不好的原因:

  • 验证集的大小
  • 这个模型的复杂程度(一般不会太大,比如说这里只有3个,取决于如何设计实验)

2022最新版-李宏毅机器学习深度学习课程-P23 为什么用了验证集结果还是过拟合_第3张图片

你可能感兴趣的:(李宏毅机器学习深度学习,机器学习,深度学习,人工智能)