阅读笔记 - 《统计学习方法 - 李航》

阅读笔记 - 《统计学习方法 - 李航》


1 统计分析

1.1 常见的几种损失函数

阅读笔记 - 《统计学习方法 - 李航》_第1张图片

1.2 风险函数

阅读笔记 - 《统计学习方法 - 李航》_第2张图片

1.3 过拟合

阅读笔记 - 《统计学习方法 - 李航》_第3张图片

1.4 损失函数

阅读笔记 - 《统计学习方法 - 李航》_第4张图片
阅读笔记 - 《统计学习方法 - 李航》_第5张图片
阅读笔记 - 《统计学习方法 - 李航》_第6张图片

1.5 模型选择的方法1:正则化

阅读笔记 - 《统计学习方法 - 李航》_第7张图片

1.6 模型选择的方法2:交叉验证

阅读笔记 - 《统计学习方法 - 李航》_第8张图片
阅读笔记 - 《统计学习方法 - 李航》_第9张图片

1.7 生成方法与判别方法

阅读笔记 - 《统计学习方法 - 李航》_第10张图片

1.8 分类器评估指标-精确率、召回率、f1

阅读笔记 - 《统计学习方法 - 李航》_第11张图片

1.9 序列标注

阅读笔记 - 《统计学习方法 - 李航》_第12张图片
阅读笔记 - 《统计学习方法 - 李航》_第13张图片

1.10 回归

image_1chpj8k9o1fu816hr1oka11171ts29m.png-28.6kB

1.11 本章概要

阅读笔记 - 《统计学习方法 - 李航》_第14张图片

2 感知机

阅读笔记 - 《统计学习方法 - 李航》_第15张图片
就是在线性可分的情况下,有无穷解

3 K近邻

阅读笔记 - 《统计学习方法 - 李航》_第16张图片
阅读笔记 - 《统计学习方法 - 李航》_第17张图片

3.1 kd树

阅读笔记 - 《统计学习方法 - 李航》_第18张图片

3.2 本章小结

阅读笔记 - 《统计学习方法 - 李航》_第19张图片

4 朴素贝叶斯

阅读笔记 - 《统计学习方法 - 李航》_第20张图片
image_1chpmt4tqr0soa51hr37tq1d66es.png-11.3kB

4.1 基本方法

阅读笔记 - 《统计学习方法 - 李航》_第21张图片

4.2 极大似然估计

阅读笔记 - 《统计学习方法 - 李航》_第22张图片

4.3 本章概述

阅读笔记 - 《统计学习方法 - 李航》_第23张图片
阅读笔记 - 《统计学习方法 - 李航》_第24张图片

5 决策树

阅读笔记 - 《统计学习方法 - 李航》_第25张图片

5.1 定义

image_1chpq3cr21mp4ml614st1emjptj1t.png-58.6kB

5.2 选择最优的决策树是NP完全问题

阅读笔记 - 《统计学习方法 - 李航》_第26张图片

5.3 决策树的生成与剪枝

阅读笔记 - 《统计学习方法 - 李航》_第27张图片

5.4 熵

阅读笔记 - 《统计学习方法 - 李航》_第28张图片
阅读笔记 - 《统计学习方法 - 李航》_第29张图片

5.5 本章总结

阅读笔记 - 《统计学习方法 - 李航》_第30张图片
阅读笔记 - 《统计学习方法 - 李航》_第31张图片
阅读笔记 - 《统计学习方法 - 李航》_第32张图片

6 逻辑回归

阅读笔记 - 《统计学习方法 - 李航》_第33张图片
阅读笔记 - 《统计学习方法 - 李航》_第34张图片

7 SVM - 支持向量机

阅读笔记 - 《统计学习方法 - 李航》_第35张图片

7.1 学习目标 - 感知机与SVM的区别

阅读笔记 - 《统计学习方法 - 李航》_第36张图片

7.2 函数间隔与几何间隔

阅读笔记 - 《统计学习方法 - 李航》_第37张图片
阅读笔记 - 《统计学习方法 - 李航》_第38张图片

7.3 硬间隔最大化

阅读笔记 - 《统计学习方法 - 李航》_第39张图片

7.4 线性可分支持向量机学习的最优化问题

image_1chptolrlkov176s1quju1v9fj9v.png-236.7kB

7.5 软间隔最大化

阅读笔记 - 《统计学习方法 - 李航》_第40张图片

7.6 常用核函数

阅读笔记 - 《统计学习方法 - 李航》_第41张图片

7.7 本章概要

阅读笔记 - 《统计学习方法 - 李航》_第42张图片
阅读笔记 - 《统计学习方法 - 李航》_第43张图片
阅读笔记 - 《统计学习方法 - 李航》_第44张图片
阅读笔记 - 《统计学习方法 - 李航》_第45张图片
阅读笔记 - 《统计学习方法 - 李航》_第46张图片

8 boosting

8.1 Adaboost

阅读笔记 - 《统计学习方法 - 李航》_第47张图片

8.2 Adaboost算法流程

阅读笔记 - 《统计学习方法 - 李航》_第48张图片
阅读笔记 - 《统计学习方法 - 李航》_第49张图片

8.3 案例

阅读笔记 - 《统计学习方法 - 李航》_第50张图片
阅读笔记 - 《统计学习方法 - 李航》_第51张图片
阅读笔记 - 《统计学习方法 - 李航》_第52张图片

8.4 Adaboost的优势

阅读笔记 - 《统计学习方法 - 李航》_第53张图片
阅读笔记 - 《统计学习方法 - 李航》_第54张图片

8.5 Adaboost的解释

image_1chq4603s14jc1tlbbhff3se3b6c.png-36.5kB

8.6 本章概要

阅读笔记 - 《统计学习方法 - 李航》_第55张图片
image_1chq4ffju1ljm1ce11a2s1c3em0376.png-26.7kB

9 EM算法 - 期望极大算法

阅读笔记 - 《统计学习方法 - 李航》_第56张图片
阅读笔记 - 《统计学习方法 - 李航》_第57张图片

本章概要

阅读笔记 - 《统计学习方法 - 李航》_第58张图片
阅读笔记 - 《统计学习方法 - 李航》_第59张图片

10 隐马尔科夫模型

image_1chq6gkluk9vknvufcht1he09k.png-41kB
阅读笔记 - 《统计学习方法 - 李航》_第60张图片

11 总结

阅读笔记 - 《统计学习方法 - 李航》_第61张图片

你可能感兴趣的:(机器学习,算法)