线性回归和逻辑回归正则化

正则化线性回归的代价函数：
J(θ)=12m[∑mi=1(hθ(x(i))−y(i))2+λ∑nj=1θ2j]

梯度下降法用于线性回归：
θ0:=θ0−α1m∑mi=1((hθ(x(i))−y(i))∗x(i)0)

θj:=θj−α1m∑mi=1((hθ(x(i))−y(i))∗x(i)j+λmθj) j=1, 2, … n

正规方程求解：

正则化逻辑回归代价函数：
J(θ)=−[1m∑mi=1(y(i)∗log(hθ(x(i)))+(1−y(i))∗log(1−hθ(x(i))))]+λ2m∑nj=1θ2j

梯度下降法用于逻辑回归：
θ0:=θ0−α1m∑mi=1((hθ(x(i))−y(i))∗xi0)

θj:=θj−α1m∑mi=1((hθ(x(i))−y(i))∗xij+λmθj) j=1, 2 ,… , m