日韩欧美自拍在线观看-欧美精品在线看片一区二区-高清性视频一区二区播放-欧美日韩女优制服另类-国产精品久久久久久av蜜臀-成人在线黄色av网站-肥臀熟妇一区二区三区-亚洲视频在线播放老色-在线成人激情自拍视频

一種基于密度的聚類的算法

出處:李 樂1, 陳鴻昶1, 李 鵬2 發(fā)布于:2011-07-20 11:59:42

  將物理或抽象對(duì)象的集合分成由類似的對(duì)象組成的多個(gè)類的過程被稱為聚類。由聚類所生成的簇是一組數(shù)據(jù)對(duì)象的集合,這些對(duì)象與同一個(gè)簇中的對(duì)象彼此相似,與其他簇中的對(duì)象相異目前,它已成為數(shù)據(jù)挖掘研究領(lǐng)域中一個(gè)非?;钴S的研究方向。聚類分析技術(shù)在模式識(shí)別、數(shù)據(jù)分析、圖像處理和市場研究等許多領(lǐng)域得到了廣泛的應(yīng)用。

  許多算法被設(shè)計(jì)用來聚類數(shù)值類型的數(shù)據(jù)。但是,應(yīng)用可能要求聚類其他類型的數(shù)據(jù),如二元類型(binary),分類/標(biāo)稱類型(categorical/nominal),序數(shù)型(ordinal)數(shù)據(jù),或者這些數(shù)據(jù)類型的混合。 其主要思想是:只要臨近區(qū)域的密度(對(duì)象或數(shù)據(jù)點(diǎn)的數(shù)目)超過某個(gè)閾值就繼續(xù)聚類。樣的方法可以用來過濾噪聲和孤立點(diǎn)數(shù)據(jù),發(fā)現(xiàn)任意形狀的類。

  DBSCAN算法利用類的高密度連通性可以快速發(fā)現(xiàn)任意形狀的類,但是當(dāng)處理的數(shù)據(jù)量較大時(shí),一般的聚類算法不能滿足在線聚類這一特點(diǎn),計(jì)算復(fù)雜度高,速度慢。

  1 DBSCAN算法

  DBSCAN(Density-Based Spatial Clustering of Applacations with Noise)是一個(gè)比較有代表性的基于密度的聚類算法。與劃分和層次聚類方法不同,它將簇定義為密度相連的點(diǎn)的集合,能夠把具有足夠高密度的區(qū)域劃分為簇,并可在噪聲的空間數(shù)據(jù)庫中發(fā)現(xiàn)任意形狀的聚類。DBSCAN算法具有足夠高密度的區(qū)域劃分為一類,并可以在帶有噪聲的空間數(shù)據(jù)庫中發(fā)現(xiàn)任意形狀的聚類

  DBSCAN算法提出了一些新的定義:

  DBSCAN算法是基于密度的聚類算法,它將類看作是數(shù)據(jù)空間中被低密度區(qū)域分割開的高密度對(duì)象區(qū)域。在該算法中,發(fā)現(xiàn)一個(gè)聚類的過程是基于這樣的事實(shí):一個(gè)聚類能夠被其中的任意一個(gè)對(duì)象所確定。其基本思想是:考察數(shù)據(jù)庫D中的某一個(gè)點(diǎn)P,若P是點(diǎn),則通過區(qū)域查詢得到該點(diǎn)的鄰域,鄰域中的點(diǎn)和P同屬于一個(gè)類,這些點(diǎn)將作為下一輪的考察對(duì)象,并通過不斷地對(duì)種子點(diǎn)進(jìn)行區(qū)域查詢來擴(kuò)展它們所在的類,直至找到一個(gè)完整的類。

  2 M-DBSCAN算法

  2.1 在線聚類

  由于處理數(shù)據(jù)量較大,性處理完畢不但運(yùn)算量大,復(fù)雜度高,而且對(duì)存儲(chǔ)空間的需求量大,因此本文提出一種在線式聚類算法,可以動(dòng)態(tài)增加聚類數(shù)目。

  算法的原理是:隨著輸入樣本數(shù)據(jù)的不斷增加,實(shí)時(shí)動(dòng)態(tài)地增加聚類個(gè)數(shù)或調(diào)整聚類中心及聚類半徑,在形成的任意一個(gè)聚類中,聚類中心與屬于此聚類的樣本點(diǎn)的相似度都不小于一個(gè)閾值dthr,dthr的選取將直接影響到聚類數(shù)目。

  將在線式聚類算法引入后,算法的描述如下:

  (1)積累一小段時(shí)間內(nèi)的數(shù)據(jù),進(jìn)行歸一化壓縮,進(jìn)行相似度計(jì)算,得到相似度矩陣;

 ?。?)通過對(duì)相似度矩陣進(jìn)行比較分析,找出鄰域密度的數(shù)據(jù)點(diǎn)作為個(gè)初始類的中心c1;

  (3)對(duì)尚未加入此類的數(shù)據(jù)點(diǎn)xi,比較與類中心的距離是否大于給定閾值dthr,若是,則加入此類,否則創(chuàng)建一個(gè)新類cj;

 ?。?)處理完這一小段數(shù)據(jù)后,對(duì)新到來的一個(gè)數(shù)據(jù)點(diǎn)進(jìn)行與(3)相同的做法,確定其類別;

 ?。?)直到?jīng)]有數(shù)據(jù)到來為止,輸出聚類結(jié)果。

  2.2 改進(jìn)的算法

  DBSCAN算法在對(duì)類的劃分時(shí)采用的方法是:比較此數(shù)據(jù)點(diǎn)到各類中心的距離,若小于某閾值,則屬于此類??梢婇撝档倪x擇直接影響類的劃分及類的數(shù)目。但是如圖1所產(chǎn)生的聚類模塊[3]所示,這種方法帶來的問題就是:距離近的不一定屬于同一類,在閾值半徑內(nèi)的不一定屬于同一類。

  針對(duì)此問題,本文提出一種改進(jìn)的算法M-DBSCAN。首先實(shí)現(xiàn)在線聚類,可以動(dòng)態(tài)調(diào)整聚類的數(shù)目;之后,通過將數(shù)據(jù)點(diǎn)到類的平均距離與類內(nèi)平均距離以及新半徑與原半徑作比較進(jìn)行雙重判決,確定數(shù)據(jù)點(diǎn)是否可以加入此類中,以實(shí)時(shí)調(diào)整閾值半徑,解決了類劃分錯(cuò)誤的問題。

  改進(jìn)后整個(gè)算法描述如下:

 ?。?)積累一小段時(shí)間內(nèi)的數(shù)據(jù),得到相似度矩陣

 ?。?)給定閾值dthr,找出鄰域密度的數(shù)據(jù)點(diǎn)作為個(gè)初始類的中心c1,計(jì)算S中每行值大于dthr的個(gè)數(shù),個(gè)數(shù)多的行號(hào)即為個(gè)類的中心,將類中的數(shù)據(jù)點(diǎn)存放到矩陣S’(n×n+2)的行,每行中的個(gè)為類中心,計(jì)算類的平均半徑r,同時(shí)計(jì)算此類的平均距離d2,放到兩位。

 ?。?)對(duì)尚未加入的數(shù)據(jù)點(diǎn),計(jì)算某一個(gè)數(shù)據(jù)點(diǎn)到類c1中的所有點(diǎn)的平均距離d1,類的平均距離d2;

  若d1<d2,則判斷加入此數(shù)據(jù)后類的半徑是否變大;如果變小,將數(shù)據(jù)點(diǎn)加入此類,同時(shí)改變此類的平均半徑;否則尋找下一個(gè)聚類,計(jì)算同上。

  如果不能加入到任何一個(gè)已有聚類,則創(chuàng)建一個(gè)新的類,將其存入S’中。

  部分偽代碼:

  Cluster M-DBSCAN()

  {

  Initialize S(n×n),dthr;

  For i=1:n

  If S(i,j)>=dthr

  sum(i)++;

  count(i,j)=j;

  j++;

  end

  end

  sort(sum(:));

  S’(1,:)=count(,:);

  S’(1,n+1)=meanradius;

  S’(1,n+2)=meandistance2;

  If meandistance1<meandistance2

  If meanradiusnew<meanradius

  Add xj to S’(1);

  S’(1,n+1)=new meanradius;

  Else

  Next class;

  End

  If no class

  Create a new class S’(2);

  End

  …

  Until no data come

  It’s over

  Output S’

  }

  3 算法性能及分析

  對(duì)M-DBSCAN算法的性能作了測試,并與DBSCAN作了比較。所有的測試都在1臺(tái)PC機(jī)上進(jìn)行,配置P4,2.0 GHz CPU,512 MB內(nèi)存,80 GB硬盤,算法用Matlab7.3實(shí)現(xiàn)。

  首先用構(gòu)造的模擬數(shù)據(jù)對(duì)聚類結(jié)果進(jìn)行驗(yàn)證。圖2為DBSCAN算法在閾值半徑為20時(shí)得到的結(jié)果,明顯地將不同的三類作為一類輸出,形成了錯(cuò)誤的類劃分;而在取同樣的初始閾值半徑時(shí),圖3可以看出M-DBSCAN算法得到更好的聚類結(jié)果。

  從圖4中可以看到兩種算法在SEQUOIA 2000數(shù)據(jù)庫上對(duì)不同數(shù)據(jù)量樣本的執(zhí)行時(shí)間的比較。算法M-DBSCAN比算法DBSCAN快得多,且隨著數(shù)據(jù)量的不斷增大,這種速度上的差別越來越大。表1為兩種算法的錯(cuò)誤率比較圖,錯(cuò)誤率為,N1為算法所得聚類數(shù)目,N2為實(shí)際聚類數(shù)目。表1中可看出,改進(jìn)的M-DBSCAN算法錯(cuò)誤概率普遍要小于DBSCAN的,表明改進(jìn)后的算法減小了錯(cuò)誤率,對(duì)處理大樣本集有較好的性能。

  表2中的測試數(shù)據(jù)集來自Dr.JSrg Sander提供的仿照DBSCAN 中DataBase2生成的數(shù)據(jù)集DB2[8]。由表中可以看出,當(dāng)數(shù)據(jù)規(guī)模為50 000時(shí),雖然SGDO[7]處理噪音點(diǎn)的能力比M-DBSCAN強(qiáng),但是從錯(cuò)誤率和運(yùn)行時(shí)間上M-DBSCAN比前兩者都有較大的改善。CURD雖然有較短的運(yùn)行時(shí)間,但是存在大量的噪音點(diǎn)。

  本文討論了一種將DBSCAN聚類算法進(jìn)行改進(jìn)的M-DBSCAN聚類算法,它克服了DBSCAN聚類算法不能處理大數(shù)據(jù)集的問題,并實(shí)現(xiàn)可以對(duì)閾值進(jìn)行實(shí)時(shí)更改。試驗(yàn)結(jié)果顯示,M-DBSCAN算法的準(zhǔn)確性比DBSCAN算法要好,處理大數(shù)據(jù)集的速度更快。但是對(duì)于聚類數(shù)目的確定仍然是判斷是否超過某閾值才可算作某一類的標(biāo)準(zhǔn),聚類數(shù)目與閾值的選擇有很大關(guān)系。因此如何自動(dòng)確定聚類數(shù)目將是下一步工作的方向。
  

關(guān)鍵詞:一種基于密度的聚類的算法

版權(quán)與免責(zé)聲明

凡本網(wǎng)注明“出處:維庫電子市場網(wǎng)”的所有作品,版權(quán)均屬于維庫電子市場網(wǎng),轉(zhuǎn)載請(qǐng)必須注明維庫電子市場網(wǎng),http://www.hbjingang.com,違反者本網(wǎng)將追究相關(guān)法律責(zé)任。

本網(wǎng)轉(zhuǎn)載并注明自其它出處的作品,目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點(diǎn)或證實(shí)其內(nèi)容的真實(shí)性,不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。其他媒體、網(wǎng)站或個(gè)人從本網(wǎng)轉(zhuǎn)載時(shí),必須保留本網(wǎng)注明的作品出處,并自負(fù)版權(quán)等法律責(zé)任。

如涉及作品內(nèi)容、版權(quán)等問題,請(qǐng)?jiān)谧髌钒l(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關(guān)權(quán)利。

廣告
OEM清單文件: OEM清單文件
*公司名:
*聯(lián)系人:
*手機(jī)號(hào)碼:
QQ:
有效期:

掃碼下載APP,
一鍵連接廣大的電子世界。

在線人工客服

買家服務(wù):
賣家服務(wù):
技術(shù)客服:

0571-85317607

網(wǎng)站技術(shù)支持

13606545031

客服在線時(shí)間周一至周五
9:00-17:30

關(guān)注官方微信號(hào),
第一時(shí)間獲取資訊。

建議反饋

聯(lián)系人:

聯(lián)系方式:

按住滑塊,拖拽到最右邊
>>
感謝您向阿庫提出的寶貴意見,您的參與是維庫提升服務(wù)的動(dòng)力!意見一經(jīng)采納,將有感恩紅包奉上哦!