回归问题

回归问题也是监督学习的问题。

回归用于输入变量和输出变量之间的关系。

回归模型表示从输入变量到输出变量之间映射的函数。

回归问题等价于函数拟合：输出一条曲线，能够和好的拟合一直数据，并预测未知数据。

回归问题按照输入变量的个数分为一元回归和多元回归。按照输入变量和输出变量之间关系的类型，分为线性回归和非线性回归。

当回归问题的损失函数是平方损失函数时，可以由最小二乘法求解。