Python實(shí)現(xiàn)K-means聚類算法并可視化生成動(dòng)圖步驟詳解
K-means算法介紹
簡(jiǎn)單來說,K-means算法是一種無監(jiān)督算法,不需要事先對(duì)數(shù)據(jù)集打上標(biāo)簽,即ground-truth,也可以對(duì)數(shù)據(jù)集進(jìn)行分類,并且可以指定類別數(shù)目 牧師-村民模型
K-means 有一個(gè)著名的解釋:牧師—村民模型:
有四個(gè)牧師去郊區(qū)布道,一開始牧師們隨意選了幾個(gè)布道點(diǎn),并且把這幾個(gè)布道點(diǎn)的情況公告給了郊區(qū)所有的村民,于是每個(gè)村民到離自己家最近的布道點(diǎn)去聽課。
聽課之后,大家覺得距離太遠(yuǎn)了,于是每個(gè)牧師統(tǒng)計(jì)了一下自己的課上所有的村民的地址,搬到了所有地址的中心地帶,并且在海報(bào)上更新了自己的布道點(diǎn)的位置。
牧師每一次移動(dòng)不可能離所有人都更近,有的人發(fā)現(xiàn)A牧師移動(dòng)以后自己還不如去B牧師處聽課更近,于是每個(gè)村民又去了離自己最近的布道點(diǎn)……
就這樣,牧師每個(gè)禮拜更新自己的位置,村民根據(jù)自己的情況選擇布道點(diǎn),最終穩(wěn)定了下來。
牧師的目的非常明顯,就是要讓每個(gè)來上自己課的村民走的路程最少
算法步驟
- 指定k個(gè)中心點(diǎn)
- 更新數(shù)據(jù)點(diǎn)所屬類別:計(jì)算每個(gè)數(shù)據(jù)點(diǎn)到這k個(gè)點(diǎn)的歐氏距離,距離最小即為這個(gè)數(shù)據(jù)點(diǎn)的類別
- 更新中心點(diǎn)坐標(biāo):對(duì)每一個(gè)類別的數(shù)據(jù)點(diǎn)求平均,平均值即為新的中心點(diǎn)位置
偽代碼
獲取m個(gè)n維的數(shù)據(jù) 隨即選取k個(gè)點(diǎn)作為初始中心點(diǎn) while keep_changing: for i in range(m): for j in range(k): 計(jì)算每個(gè)點(diǎn)到center的距離 判斷離哪個(gè)點(diǎn)更近 for center in range(k): 更新類別中心點(diǎn)的坐標(biāo)
用Python實(shí)現(xiàn)K-means聚類算法
import numpy as np
import matplotlib.pyplot as plt
import sklearn.datasets as datasets
def create_data():
X,y = datasets.make_blobs(n_samples=1000,n_features=2,centers=[[1,0],[5,4],[2,3],[10,8],[7,4]])
return X,y
def init_centers(data,k):
m, n =data.shape
# m 樣本個(gè)數(shù),n特征個(gè)數(shù)
center_ids = np.random.choice(m,k)
centers = data[center_ids]
return centers
def cal_dist(ptA,ptB):
return np.linalg.norm(ptA-ptB)
def kmeans_process(data,k):
centers = init_centers(data, k)
m, n = data.shape
keep_changing = True
pred_y = np.zeros((m,))
while keep_changing:
keep_changing = False
# 計(jì)算剩余樣本所屬類別
for i in range(m):
min_distance = np.inf
for center in range(k):
distance = cal_dist(data[i,:],centers[center,:])
if distance<min_distance: # 判斷離哪個(gè)更近
min_distance = distance
idx = center # 類別換下
if pred_y[i] != idx: # 判斷是否發(fā)生了改變
keep_changing = True
pred_y[i] = idx
# 更新類別中心點(diǎn)坐標(biāo)
for center in range(k):
cluster_data = data[pred_y==center]
centers[center,:] = np.mean(cluster_data, axis=0) # 求相同類別數(shù)據(jù)點(diǎn)的質(zhì)心點(diǎn)
print(centers)
return centers, pred_y
if __name__ == '__main__':
X, y = create_data()
centers , pred_y = kmeans_process(data=X, k=5)
plt.scatter(X[:,0], X[:,1], s=3, c=pred_y)
plt.scatter(centers[:,0], centers[:,1], s=10, c='k')
plt.show()
效果圖

到此這篇關(guān)于Python實(shí)現(xiàn)K-means聚類算法并可視化生成動(dòng)圖步驟詳解的文章就介紹到這了,更多相關(guān)Python可視化K-means聚類算法內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- Python使用樹狀圖實(shí)現(xiàn)可視化聚類詳解
- Python基于紋理背景和聚類算法實(shí)現(xiàn)圖像分割詳解
- python 層次聚類算法圖文示例
- Python K-means實(shí)現(xiàn)簡(jiǎn)單圖像聚類的示例代碼
- Python使用OpenCV和K-Means聚類對(duì)畢業(yè)照進(jìn)行圖像分割
- 在Python中使用K-Means聚類和PCA主成分分析進(jìn)行圖像壓縮
- python基于K-means聚類算法的圖像分割
- python聚類算法解決方案(rest接口/mpp數(shù)據(jù)庫(kù)/json數(shù)據(jù)/下載圖片及數(shù)據(jù))
- 使用python實(shí)現(xiàn)3D聚類圖示例代碼
相關(guān)文章
python中的try except與R語言中的tryCatch異常解決
這篇文章主要為大家介紹了python中的try except與R語言中的tryCatch異常解決的方式及分析,有需要的朋友可以借鑒參考下,希望能夠有所幫助2021-11-11
用Python實(shí)現(xiàn)一個(gè)簡(jiǎn)單的抽獎(jiǎng)小程序
最近開始學(xué)習(xí)python相關(guān)知識(shí),看最近有不少隨機(jī)抽獎(jiǎng)小程序,自己也做一個(gè)試試,下面這篇文章主要給大家介紹了關(guān)于如何利用Python實(shí)現(xiàn)一個(gè)簡(jiǎn)單的抽獎(jiǎng)小程序的相關(guān)資料,需要的朋友可以參考下2023-05-05
安裝Pycharm2019以及配置anconda教程的方法步驟
這篇文章主要介紹了安裝Pycharm2019以及配置anconda教程的方法步驟,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-11-11
10個(gè)必須要掌握的Python內(nèi)置函數(shù)
Python?解釋器自帶的函數(shù)叫做?內(nèi)置函數(shù),這些函數(shù)不需要import?導(dǎo)入就可以直接使用。本文小編為大家總結(jié)了十個(gè)必須要掌握的Python內(nèi)置函數(shù),實(shí)用且高效,需要的可以參考一下2022-02-02
利用Django-environ如何區(qū)分不同環(huán)境
這篇文章主要給大家介紹了關(guān)于利用Django-environ如何區(qū)分不同環(huán)境的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家學(xué)習(xí)或者使用django具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-08-08
python獲取word文檔總頁(yè)數(shù)的兩種方法
這篇文章主要介紹了python獲取word文檔的總頁(yè)數(shù)的兩種方法,文中給出了兩種解決方案,兩種方案也都各有優(yōu)缺點(diǎn),可能也不一定是完全準(zhǔn)確的,需要的朋友可以參考下2024-03-03
tensorflow實(shí)現(xiàn)對(duì)圖片的讀取的示例代碼
本篇文章主要介紹了tensorflow實(shí)現(xiàn)對(duì)圖片的讀取的示例代碼,小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2018-02-02

