机器学习——KMeans

导入类库

 from sklearn.cluster import KMeans

 from sklearn.datasets import make_blobs

 import numpy as np

 import matplotlib.pyplot as plt

　　KMeans算法的过程：(假如有两类)

1. 随机选择两个点作为聚类的中心
2. 计算所有点距离两个中心的距离，选择距离较近的点作为类别。（例如：距离蓝点近，类别是蓝色）
3. 计算已经分好类的各组数据的平均值，使用各组数据的平均值中心作为新的中心
4. 以新的中心为依据跳转至第2步
5. 直到收敛(两次迭代的数值没有明显的变化：新中心点距离上一次中心点的距离小于某个阈值，例如：0.03)

代码

 plt.figure(figsize=(6, 3))

 n_samples = 1500

 random_state = 170

 '''

 make_blobs聚类数据生成器：用来生成聚类算法的测试数据

 n_samples：待生成的样本的总数

 n_features：每个样本的特征数

 centers：类别数

 cluster_std：每个类别的方差，放在列表中

 '''

 X, y = make_blobs(n_samples=n_samples, random_state=random_state)

 '''

 KMeans是结果受初始值影响的局部最优的迭代算法

 n_clusters：K值，类别数

 max_iter：最大迭代次数，凸数据集可忽略该值，非凸数据集可能很难收敛，可指定最大迭代次数让算法可以及时推出循环

 n_init：用不同的初始化质心运行算法的次数，默认是10，K值较大时，可适当增大该值

 init：初始值选择的方式，默认为k-means++

 algorithm：auto、full、elkan；auto自动选择，数据值稀疏时选择full，数据稠密时选择elkan

 '''

 y_pred = KMeans(n_clusters=2, random_state=random_state).fit_predict(X)

 # print(X[:, 0])

 # print(y)

 # for i in y_pred:

 #     print(i)

 # 根据颜色画出散点图

 plt.subplot(121)

 plt.scatter(X[:, 0], X[:, 1], c=y_pred)

 plt.subplot(122)

 plt.scatter(X[:, 0], X[:, 1], c=y)

 plt.show()