Logistic Regression（2018-05-04）

1. 逻辑回归算法

• 定义：能预测出二类概率（即属于1，或不属于0）的一种简单的分类算法。图形类似S型

  
  
  image.png

2. 注意点
   逻辑回归算法是一种分类算法，而非回归算法。

3. 逻辑回归数学方程：logistic/sigmoid function

   
   
   image.png

image.png

4. 如何找到合适的参数

• 步骤1： 写出对数形式的损失方程

  
  
  image.png
  
  
  image.png

5. 使用逻辑回归算法解决多类的分类问题

• 思想：使用“一对其他”。

• 其它：Random Forest， Naive Bayes能直接处理多类分类问题， SVM， Linear Classifier是严格的二元分类器。当然可以使用不同的办法来用多个二元分类器解决多类分类的问题。
  图解：

  
  
  image.png