机器学习之——“损失函数”与“成本函数”的辨析

机器学习之——“损失函数”与“成本函数”的辨析

损失函数与成本函数都表示预测结果与真实情况的偏差。

损失函数：是针对单个样本，
成本函数：针对整个数据集

成本函数是由损失函数计算得到的。不过在实际计算中，可以选择令成本函数为损失函数的总和，也可以令成本函数是损失函数值的平均。

无论是总和还是平均，最终目标都是希望最小化成本，从而使假设函数的预测最可靠。