机器学习:无监督学习

文章目录

  • 线性学习方法
    • 聚类Clustering
      • Kmeans
      • HAC
    • 分布表示
      • 降维
      • PCA
      • Matrix Factorization
      • Manifold Learning
        • LLE
        • Laplacian Eigenmaps
        • t-SEN

线性学习方法

机器学习:无监督学习_第1张图片

聚类Clustering

Kmeans

机器学习:无监督学习_第2张图片
随机选取K个中心,然后计算每个点与中心的距离,找最近的,然后更新中心点

HAC

机器学习:无监督学习_第3张图片
机器学习:无监督学习_第4张图片
如何觉得距离的个数跟kmeans不一样,切的地方不一样导致的数量会不一样。

分布表示

机器学习:无监督学习_第5张图片

降维

机器学习:无监督学习_第6张图片
机器学习:无监督学习_第7张图片
机器学习:无监督学习_第8张图片

PCA

机器学习:无监督学习_第9张图片

特征先归一化,然后计算投影,选择最大的方差的

机器学习:无监督学习_第10张图片
机器学习:无监督学习_第11张图片
w 1 w_1 w1 w 2 w_2 w2是垂直的,后续也是找垂直于它们的 w 3 w_3 w3 …看需要多少维。

机器学习:无监督学习_第12张图片
机器学习:无监督学习_第13张图片
w 1 w1 w1就是最大的特征向量。然后找下一个 w 2 w2 w2
机器学习:无监督学习_第14张图片
机器学习:无监督学习_第15张图片
机器学习:无监督学习_第16张图片
机器学习:无监督学习_第17张图片
基本的内容组成,直线,点,斜线,圆圈等。一个数字就能用这些进行表示:
机器学习:无监督学习_第18张图片
机器学习:无监督学习_第19张图片
机器学习:无监督学习_第20张图片
机器学习:无监督学习_第21张图片
机器学习:无监督学习_第22张图片
机器学习:无监督学习_第23张图片
机器学习:无监督学习_第24张图片
机器学习:无监督学习_第25张图片
机器学习:无监督学习_第26张图片
在强度,生命力,攻击力等方面各有侧重
机器学习:无监督学习_第27张图片
机器学习:无监督学习_第28张图片
机器学习:无监督学习_第29张图片
机器学习:无监督学习_第30张图片
机器学习:无监督学习_第31张图片
机器学习:无监督学习_第32张图片

Matrix Factorization

机器学习:无监督学习_第33张图片
元素之间有些相同的特点。
机器学习:无监督学习_第34张图片
这些事情是没有人知道的。

机器学习:无监督学习_第35张图片
有的是只有这种关系矩阵,如果基于这些关系推断出关系:

机器学习:无监督学习_第36张图片
可以将这个进行矩阵分解,得到两个向量相乘,但是会存在那种缺失值的话,可以考虑使用梯度下降方法:
机器学习:无监督学习_第37张图片
只考虑有定义的值。
机器学习:无监督学习_第38张图片
机器学习:无监督学习_第39张图片
就可以预测缺失的值,然后就能判断每个人对某个物体的喜好程度,填充:
机器学习:无监督学习_第40张图片
该算法可以用于推荐系统。
机器学习:无监督学习_第41张图片

可以考虑通过梯度下降算法硬解一下。
MF也可以用于主题分析,LSA
机器学习:无监督学习_第42张图片
机器学习:无监督学习_第43张图片


Manifold Learning

机器学习:无监督学习_第44张图片
从立体变成2d

LLE

机器学习:无监督学习_第45张图片
机器学习:无监督学习_第46张图片
机器学习:无监督学习_第47张图片
机器学习:无监督学习_第48张图片
机器学习:无监督学习_第49张图片

Laplacian Eigenmaps

机器学习:无监督学习_第50张图片
机器学习:无监督学习_第51张图片
机器学习:无监督学习_第52张图片

t-SEN

机器学习:无监督学习_第53张图片
coil-20数据
机器学习:无监督学习_第54张图片
两个分布越接近越好,KL散度,对这个问题做梯度下降的。

机器学习:无监督学习_第55张图片

这种相似度计算方式会维持原来的距离。
机器学习:无监督学习_第56张图片
机器学习:无监督学习_第57张图片

你可能感兴趣的:(机器学习,机器学习,无监督学习)