Python實(shí)現(xiàn)K-means聚類(lèi)算法并可視化生成動(dòng)圖步驟詳解
K-means算法介紹
簡(jiǎn)單來(lái)說(shuō),K-means算法是一種無(wú)監(jiān)督算法,不需要事先對(duì)數(shù)據(jù)集打上標(biāo)簽,即ground-truth,也可以對(duì)數(shù)據(jù)集進(jìn)行分類(lèi),并且可以指定類(lèi)別數(shù)目 牧師-村民模型
K-means 有一個(gè)著名的解釋?zhuān)耗翈煛迕衲P停?/p>
有四個(gè)牧師去郊區(qū)布道,一開(kāi)始牧師們隨意選了幾個(gè)布道點(diǎn),并且把這幾個(gè)布道點(diǎn)的情況公告給了郊區(qū)所有的村民,于是每個(gè)村民到離自己家最近的布道點(diǎn)去聽(tīng)課。
聽(tīng)課之后,大家覺(jué)得距離太遠(yuǎn)了,于是每個(gè)牧師統(tǒng)計(jì)了一下自己的課上所有的村民的地址,搬到了所有地址的中心地帶,并且在海報(bào)上更新了自己的布道點(diǎn)的位置。
牧師每一次移動(dòng)不可能離所有人都更近,有的人發(fā)現(xiàn)A牧師移動(dòng)以后自己還不如去B牧師處聽(tīng)課更近,于是每個(gè)村民又去了離自己最近的布道點(diǎn)……
就這樣,牧師每個(gè)禮拜更新自己的位置,村民根據(jù)自己的情況選擇布道點(diǎn),最終穩(wěn)定了下來(lái)。
牧師的目的非常明顯,就是要讓每個(gè)來(lái)上自己課的村民走的路程最少
算法步驟
- 指定k個(gè)中心點(diǎn)
- 更新數(shù)據(jù)點(diǎn)所屬類(lèi)別:計(jì)算每個(gè)數(shù)據(jù)點(diǎn)到這k個(gè)點(diǎn)的歐氏距離,距離最小即為這個(gè)數(shù)據(jù)點(diǎn)的類(lèi)別
- 更新中心點(diǎn)坐標(biāo):對(duì)每一個(gè)類(lèi)別的數(shù)據(jù)點(diǎn)求平均,平均值即為新的中心點(diǎn)位置
偽代碼
獲取m個(gè)n維的數(shù)據(jù) 隨即選取k個(gè)點(diǎn)作為初始中心點(diǎn) while keep_changing: for i in range(m): for j in range(k): 計(jì)算每個(gè)點(diǎn)到center的距離 判斷離哪個(gè)點(diǎn)更近 for center in range(k): 更新類(lèi)別中心點(diǎn)的坐標(biāo)
用Python實(shí)現(xiàn)K-means聚類(lèi)算法
import numpy as np import matplotlib.pyplot as plt import sklearn.datasets as datasets def create_data(): X,y = datasets.make_blobs(n_samples=1000,n_features=2,centers=[[1,0],[5,4],[2,3],[10,8],[7,4]]) return X,y def init_centers(data,k): m, n =data.shape # m 樣本個(gè)數(shù),n特征個(gè)數(shù) center_ids = np.random.choice(m,k) centers = data[center_ids] return centers def cal_dist(ptA,ptB): return np.linalg.norm(ptA-ptB) def kmeans_process(data,k): centers = init_centers(data, k) m, n = data.shape keep_changing = True pred_y = np.zeros((m,)) while keep_changing: keep_changing = False # 計(jì)算剩余樣本所屬類(lèi)別 for i in range(m): min_distance = np.inf for center in range(k): distance = cal_dist(data[i,:],centers[center,:]) if distance<min_distance: # 判斷離哪個(gè)更近 min_distance = distance idx = center # 類(lèi)別換下 if pred_y[i] != idx: # 判斷是否發(fā)生了改變 keep_changing = True pred_y[i] = idx # 更新類(lèi)別中心點(diǎn)坐標(biāo) for center in range(k): cluster_data = data[pred_y==center] centers[center,:] = np.mean(cluster_data, axis=0) # 求相同類(lèi)別數(shù)據(jù)點(diǎn)的質(zhì)心點(diǎn) print(centers) return centers, pred_y if __name__ == '__main__': X, y = create_data() centers , pred_y = kmeans_process(data=X, k=5) plt.scatter(X[:,0], X[:,1], s=3, c=pred_y) plt.scatter(centers[:,0], centers[:,1], s=10, c='k') plt.show()
效果圖
到此這篇關(guān)于Python實(shí)現(xiàn)K-means聚類(lèi)算法并可視化生成動(dòng)圖步驟詳解的文章就介紹到這了,更多相關(guān)Python可視化K-means聚類(lèi)算法內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- Python使用樹(shù)狀圖實(shí)現(xiàn)可視化聚類(lèi)詳解
- Python基于紋理背景和聚類(lèi)算法實(shí)現(xiàn)圖像分割詳解
- python 層次聚類(lèi)算法圖文示例
- Python K-means實(shí)現(xiàn)簡(jiǎn)單圖像聚類(lèi)的示例代碼
- Python使用OpenCV和K-Means聚類(lèi)對(duì)畢業(yè)照進(jìn)行圖像分割
- 在Python中使用K-Means聚類(lèi)和PCA主成分分析進(jìn)行圖像壓縮
- python基于K-means聚類(lèi)算法的圖像分割
- python聚類(lèi)算法解決方案(rest接口/mpp數(shù)據(jù)庫(kù)/json數(shù)據(jù)/下載圖片及數(shù)據(jù))
- 使用python實(shí)現(xiàn)3D聚類(lèi)圖示例代碼
相關(guān)文章
使用python爬取4K壁紙保存到本地文件夾的全過(guò)程
圖片信息豐富多彩,許多網(wǎng)站上都有大量精美的圖片資源,有時(shí)候我們可能需要批量下載這些圖片,而手動(dòng)一個(gè)個(gè)下載顯然效率太低,所以本文給大家介紹了使用python爬取4K壁紙保存到本地文件夾的全過(guò)程,文中有詳細(xì)的代碼示例供大家參考,需要的朋友可以參考下2024-03-03Pycharm中SSH、SFTP連接遠(yuǎn)程服務(wù)器編輯調(diào)試實(shí)例
這篇文章主要介紹了Pycharm中SSH、SFTP連接遠(yuǎn)程服務(wù)器編輯調(diào)試實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-06-06python實(shí)現(xiàn)搜索指定目錄下文件及文件內(nèi)搜索指定關(guān)鍵詞的方法
這篇文章主要介紹了python實(shí)現(xiàn)搜索指定目錄下文件及文件內(nèi)搜索指定關(guān)鍵詞的方法,可實(shí)現(xiàn)針對(duì)文件夾及文件內(nèi)關(guān)鍵詞的搜索功能,需要的朋友可以參考下2015-06-06numpy.ndarray.flatten()函數(shù)的具體使用
本文主要介紹了numpy.ndarray.flatten()函數(shù)的具體使用,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03Python爬蟲(chóng)實(shí)戰(zhàn)JS逆向AES逆向加密爬取
一個(gè)建筑行業(yè)的堂哥為了搞一些商業(yè)數(shù)據(jù)前前后后花了1w,辣條我半個(gè)小時(shí)就能解決的事情,這就是技術(shù)的魅力!聲明:爬取是的公開(kāi)數(shù)據(jù)2021-10-10python經(jīng)典趣味24點(diǎn)游戲程序設(shè)計(jì)
這篇文章主要介紹了python經(jīng)典趣味24點(diǎn)游戲程序設(shè)計(jì),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07Python字符串處理實(shí)現(xiàn)單詞反轉(zhuǎn)
這篇文章主要為大家詳細(xì)介紹了Python字符串處理實(shí)現(xiàn)單詞反轉(zhuǎn)的方法,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2017-06-06python利用Excel讀取和存儲(chǔ)測(cè)試數(shù)據(jù)完成接口自動(dòng)化教程
這篇文章主要介紹了python利用Excel讀取和存儲(chǔ)測(cè)試數(shù)據(jù)完成接口自動(dòng)化教程,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-04-04Pandas之排序函數(shù)sort_values()的實(shí)現(xiàn)
這篇文章主要介紹了Pandas之排序函數(shù)sort_values()的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07