scikit-learn中的主成分分析(PCA)的使用

来源:http://www.cnblogs.com/eczhou/archive/2016/04/26/5433856.html
-Advertisement-
Play Games

1、函數原型及參數說明 參數說明: n_components: 意義:PCA演算法中所要保留的主成分個數n,也即保留下來的特征個數n 類型:int 或者 string,預設時預設為None,所有成分被保留。 賦值為int,比如n_components=1,將把原始數據降到一個維度。 賦值為string ...


1、函數原型及參數說明

class sklearn.decomposition.PCA(n_components=None, copy=True, whiten=False)

參數說明:

n_components:  
意義:PCA演算法中所要保留的主成分個數n,也即保留下來的特征個數n 類型:int 或者 string,預設時預設為None,所有成分被保留。           賦值為int,比如n_components=1,將把原始數據降到一個維度。           賦值為string,比如n_components='mle',將自動選取特征個數n,使得滿足所要求的方差百分比。

copy:

類型:bool,True或者False,預設時預設為True。

意義:表示是否在運行演算法時,將原始訓練數據複製一份。

        若為True,則運行PCA演算法後,原始訓練數據的值不會有任何改變,因為是在原始數據的副本上進行運算;

        若為False,則運行PCA演算法後,原始訓練數據的值會改,因為是在原始數據上進行降維計算。

whiten:

類型:bool,預設時預設為False

意義:白化,使得每個特征具有相同的方差。關於“白化”,可參考:Ufldl教程

2、PCA的對象

components_ :返回具有最大方差的成分。 explained_variance_ratio_:返回 所保留的n個成分各自的方差百分比。 n_components_:返回所保留的成分個數n。 mean_: noise_variance_:

3、PCA對象的方法

fit(X,y=None)

fit()可以說是scikit-learn中通用的方法,每個需要訓練的演算法都會有fit()方法,它其實就是演算法中的“訓練”這一步驟。因為PCA是無監督學習演算法,此處y自然等於None。 fit(X),表示用數據X來訓練PCA模型。 函數返回值:調用fit方法的對象本身。比如pca.fit(X),表示用X對pca這個對象進行訓練。
fit_transform(X)
用X來訓練PCA模型,同時返回降維後的數據。 newX=pca.fit_transform(X),newX就是降維後的數據。

inverse_transform()

將降維後的數據轉換成原始數據,X=pca.inverse_transform(newX)

 

transform(X)

將數據X轉換成降維後的數據。當模型訓練好後,對於新輸入的數據,都可以用transform方法來降維。
此外,還有get_covariance()、get_precision()、get_params(deep=True)、score(X, y=None)等方法,以後用到再補充吧。

4、舉例

以一組二維的數據data為例,data如下,一共12個樣本(x,y),其實就是分佈在直線y=x上的點,並且聚集在x=1、2、3、4上,各3個。

>>> data
array([[ 1.  ,  1.  ],
       [ 0.9 ,  0.95],
       [ 1.01,  1.03],
       [ 2.  ,  2.  ],
       [ 2.03,  2.06],
       [ 1.98,  1.89],
       [ 3.  ,  3.  ],
       [ 3.03,  3.05],
       [ 2.89,  3.1 ],
       [ 4.  ,  4.  ],
       [ 4.06,  4.02],
       [ 3.97,  4.01]])

data這組數據,有兩個特征,因為兩個特征是近似相等的,所以用一個特征就能表示了,即可以降到一維。下麵就來看看怎麼用sklearn中的PCA演算法包。

(1)n_components設置為1,copy預設為True,可以看到原始數據data並未改變,newData是一維的。

>>> from sklearn.decomposition import PCA 
>>> pca=PCA(n_components=1)
>>> newData=pca.fit_transform(data)
>>> newData
array([[-2.12015916],
       [-2.22617682],
       [-2.09185561],
       [-0.70594692],
       [-0.64227841],
       [-0.79795758],
       [ 0.70826533],
       [ 0.76485312],
       [ 0.70139695],
       [ 2.12247757],
       [ 2.17900746],
       [ 2.10837406]])
>>> data
array([[ 1.  ,  1.  ],
       [ 0.9 ,  0.95],
       [ 1.01,  1.03],
       [ 2.  ,  2.  ],
       [ 2.03,  2.06],
       [ 1.98,  1.89],
       [ 3.  ,  3.  ],
       [ 3.03,  3.05],
       [ 2.89,  3.1 ],
       [ 4.  ,  4.  ],
       [ 4.06,  4.02],
       [ 3.97,  4.01]])

(2)將copy設置為False,原始數據data將發生改變。

>>> pca=PCA(n_components=1,copy=False)
>>> newData=pca.fit_transform(data)
>>> data
array([[-1.48916667, -1.50916667],
       [-1.58916667, -1.55916667],
       [-1.47916667, -1.47916667],
       [-0.48916667, -0.50916667],
       [-0.45916667, -0.44916667],
       [-0.50916667, -0.61916667],
       [ 0.51083333,  0.49083333],
       [ 0.54083333,  0.54083333],
       [ 0.40083333,  0.59083333],
       [ 1.51083333,  1.49083333],
       [ 1.57083333,  1.51083333],
       [ 1.48083333,  1.50083333]])

(3)n_components設置為'mle',看看效果,自動降到了1維。

>>> pca=PCA(n_components='mle')
>>> newData=pca.fit_transform(data)
>>> newData
array([[-2.12015916],
       [-2.22617682],
       [-2.09185561],
       [-0.70594692],
       [-0.64227841],
       [-0.79795758],
       [ 0.70826533],
       [ 0.76485312],
       [ 0.70139695],
       [ 2.12247757],
       [ 2.17900746],
       [ 2.10837406]])

(4)對象的屬性值

>>> pca.n_components
1
>>> pca.explained_variance_ratio_
array([ 0.99910873])
>>> pca.explained_variance_
array([ 2.55427003])
>>> pca.get_params
<bound method PCA.get_params of PCA(copy=True, n_components=1, whiten=False)>

我們所訓練的pca對象的n_components值為1,即保留1個特征,該特征的方差為2.55427003,占所有特征的方差百分比為0.99910873,意味著幾乎保留了所有的信息。get_params返回各個參數的值。

(5)對象的方法

>>> newA=pca.transform(A)

對新的數據A,用已訓練好的pca模型進行降維。

(6)設置參數

>>> pca.set_params(copy=False)
PCA(copy=False, n_components=1, whiten=False)

設置參數。

參考:

scikit-learn官網樣例:http://scikit-learn.org/stable/modules/generated/sklearn.decomposition.PCA.html#sklearn.decomposition.PCA

博文:http://blog.csdn.net/u012162613/article/details/42192293

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 代碼: ...
  • .錯誤碼 ORA-12154相信作為ORACLE資料庫的開發人員沒有少碰到“ORA-12154: TNS: 無法解析指定的連接標識符”,今天我也又碰到了類似的情況,將我的解決方法進行小結,希望能對碰到同樣問題的友人們提供幫助。問題場景描述:伺服器端版本:oracle 10.2.0.10客戶端版本:o ...
  • 什麼是SQL SERVER實例 SQL SERVER實例的概念和“類與對象”的概念很相似。可以把SQL SERVER的安裝程式看做是一個類,安裝過程則是創建對象的過程,創建出來的對象稱為“SQL SERVER實例”——即“類與對象”中把類實例化的概念。 因此,所謂的“SQL SERVER實例”,實際 ...
  • Apache Hadoop簡介 對Hadoop感興趣,寫點東西記錄一下學習之路。 (不跟風,合適的才是最好的,並不是全部企業都會用Hadoop,學習每樣東西最重要的是學習他的思維) Apache Hadoop是一個分析和處理大數據的軟體平臺,允許大型數據集使用簡單的編程模型在電腦集群進行分散式處理 ...
  • SQL: select *,(A24+A26+A28+A29+A30+A31+A32+A33+A34+A35+A36+A37+A38+A39+A40+A41+A42+A43+A44) as Number from (select Tz.productno,Tz.color,Tz.warehousei ...
  • 本學習筆記是照搬慕課網《與MySQL的零距離接觸》內容,特此感謝! 1-1 mysql的安裝與配置 Windows環境下的MSI安裝: 1、安裝: 雙擊MSI文件->用戶協議->選擇Typical(典型安裝)->instal->finish; 2、配置: 配置嚮導文件(C\\pf\\Mysql\my ...
  • 生產環境一資料庫伺服器(SQL Server 2014)的Agent服務突然停掉了,檢查了錯誤日誌,發現在"SQL Server Agent"裡面沒有"SQLServerAgent terminated (normally)"的信息,只有如下錯誤信息 根據作業運行的日誌信息,以及上面錯誤信息,可以判... ...
  • 1、插入完整的行或一部分:INSERT INTO 表名(列名1~n) VALUES (對應的值1~n) 註意:1. 省略列名,也可以插入,但在將來表結構發生變化後,可能導致錯誤,因此一般不用; 2. 如果只對部分列插入數據,省略的那些列要麼可以為NULL,要麼有預設值,否則會發生錯誤; 3. 字元型 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...