K-means聚类分析,并用t-SNE可视化聚类结果

K-means聚类分析,并用t-SNE可视化聚类结果

k-means算法,即k-均值聚类,也叫快速聚类算法,在最小化误差函数的基础上将数据划分为预定的类数k。
t-SNE属于非线性降维,具体需要研究算法原理的博友可以参考http://www.datakit.cn/blog/2017/02/05/t_sne_full.html和https://blog.csdn.net/hustqb/article/details/78144384两篇博文。

具体实例
数据如下
K-means聚类分析,并用t-SNE可视化聚类结果_第1张图片
此为客户消费行为特征数据,R表示最近一次消费时间间隔,F表示消费频率,M表示消费总金额。
需要通过聚类分析将不同消费群体分类出来
代码如下:

#k_mean算法
import pandas as pd

#参数初始化
inputfile = '../data/consumption_data.xls' #销量及其他属性数据
outputfile = '../tmp/data_type.xls' #保存结果的文件名
k = 3 #聚类的类别
iteration = 3 #聚类最大循环次数
data = pd.read_excel(inputfile, index_col = 'Id') #读取数据
data_zs = 1.0*(data - data.mean())/data.std() #数据标准化,std()表示求总体样本方差(除以n-1),numpy中std()是除以n
print(data_zs)

from sklearn.cluster import KMeans
model = KMeans(n_clusters = k, max_iter = iteration) #分为k类
#model = KMeans(n_clusters = k, n_jobs = 4, max_iter = iteration) #分为k类,并发数4
model.fit(data_zs) #开始聚类

#简单打印结果
r1 = pd.Series(model.labels_).value_counts() #统计各个类别的数目
r2 = pd.DataFrame(model.cluster_centers_) #找出聚类中心
r = pd.concat([r2, r1], axis = 1) #横向连接(0是纵向),得到聚类中心对应的类别下的数目
print(r)
r.columns = list(data.columns) + [u'类别数目'] #重命名表头
print(r)

#详细输出原始数据及其类别
r = pd.concat([data, pd.Series(model.labels_, index = data.index)], axis = 1)  #详细输出每个样本对应的类别
r.columns = list(data.columns) + [u'聚类类别'] #重命名表头
r.to_excel(outputfile) #保存结果
#用TSNE进行数据降维并展示聚类结果
from sklearn.manifold import TSNE
tsne = TSNE()
tsne.fit_transform(data_zs) #进行数据降维,并返回结果
tsne = pd.DataFrame(tsne.embedding_, index = data_zs.index) #转换数据格式

import matplotlib.pyplot as plt
plt.rcParams['font.sans-serif'] = ['SimHei'] #用来正常显示中文标签
plt.rcParams['axes.unicode_minus'] = False #用来正常显示负号

#不同类别用不同颜色和样式绘图
d = tsne[r[u'聚类类别'] == 0]     #找出聚类类别为0的数据对应的降维结果
plt.plot(d[0], d[1], 'r.')
d = tsne[r[u'聚类类别'] == 1]
plt.plot(d[0], d[1], 'go')
d = tsne[r[u'聚类类别'] == 2]
plt.plot(d[0], d[1], 'b*')
plt.show()

K-means聚类分析,并用t-SNE可视化聚类结果_第2张图片

参考文献
[1]张良均等著《python数据分析与挖掘实战》

你可能感兴趣的:(K-means聚类分析,并用t-SNE可视化聚类结果)