【李宏毅机器学习笔记1】第一节 机器学习基本概念简介（上）

第一节 机器学习基本概念简介（上）

• 1.机器学习第一步：function

  机器学习Machine Learning ≈ Looking for Function

  ML的三大任务：Regression(回归)+classification（分类）+strctured learning(create something with structure)即让机器产生有结构的东西
  
  机器学习的model：带有未知parameters的function（函数）

• 2.第二步：定义Loss函数
  

  这里提到了三种Loss:MAE、MSE、Cross-entropy
  

• 3.Optimization(优化)：找到一组w和b使得Loss值最小

  • w*是使得loss function最小的一个parameter
    
  • gradient descent 梯度下降
    
    • η: learning rate 改变更新参数的速度
    • 存在弊端：会存在local minima

• 训练包括三部分：
  
  持续更新~~~