Hadoop 安裝指南

一、安裝JDK

　　1、用戶可以在Oracle JDK的官網下載相應版本的JDK，本例以JDK 1.6為例，官網地址為http://www.oracle.com/tech-network/java/javase/downloads/index.html。

　　2、配置環境變數，在/etc/profile增加以下代碼。　　

1 #Seeting JDK JDK環境變數
2 export JAVA_HOME=/opt/java/jdk/jdk1.7.0_79
3 export JRE_HOME=${JAVA_HOME}/jre
4 export CLASSPATH=${JAVA_HOME}/lib
5 export PATH=${JAVA_HOME}/bin:$PATH

　　輸入java -version命令查看是否安裝成功

二、配置SSH

　　一般linux系統都自帶了SSH服務，如果沒有SSH服務需要自己安裝

　　1、查看是否安裝SSH: ps -e | grep ssh

　　　　如果沒有顯示sshd，說明沒有安裝ssh服務

　　2、通過 “sudo apt-get install openssh-server” 安裝　　　

$ sudo apt-get install openssh-server
正在讀取軟體包列表... 完成
正在分析軟體包的依賴關係樹       
正在讀取狀態信息... 完成       
有一些軟體包無法被安裝。如果您用的是 unstable 發行版，這也許是
因為系統無法達到您要求的狀態造成的。該版本中可能會有一些您需要的軟體
包尚未被創建或是它們已被從新到(Incoming)目錄移出。
下列信息可能會對解決問題有所幫助：
 
下列軟體包有未滿足的依賴關係：
 openssh-server : 依賴: openssh-client (= 1:6.6p1-2ubuntu1)
E: 無法修正錯誤，因為您要求某些軟體包保持現狀，就是它們破壞了軟體包間的依賴關係。

　　這是因為,openssh-server是依賴於openssh-clien的,那ubuntu不是自帶了openssh-client嗎?原由是自帶的openssh-clien與所要安裝的openssh-server所依賴的版本不同,這裡所依賴的版本是1:6.6p1-2ubuntu1，所以要安裝對應版本的openssh-clien,來覆蓋掉ubuntu自帶的。　　

$ sudo apt-get install openssh-client=1:6.6p1-2ubuntu1
正在讀取軟體包列表... 完成
正在分析軟體包的依賴關係樹       
正在讀取狀態信息... 完成       
建議安裝的軟體包：
  libpam-ssh keychain monkeysphere
下列軟體包將被【降級】：
  openssh-client
升級了 0 個軟體包，新安裝了 0 個軟體包，降級了 1 個軟體包，要卸載 0 個軟體包，有 0 個軟體包未被升級。
需要下載 566 kB 的軟體包。
解壓縮後會消耗掉 0 B 的額外空間。
您希望繼續執行嗎？ [Y/n] y
獲取：1 http://cn.archive.ubuntu.com/ubuntu/ trusty/main openssh-client amd64 1:6.6p1-2ubuntu1 [566 kB]
下載 566 kB，耗時 2秒 (212 kB/s)        
dpkg：警告：downgrading openssh-client from 1:6.6p1-2ubuntu2 to 1:6.6p1-2ubuntu1
(正在讀取資料庫 ... 系統當前共安裝有 200015 個文件和目錄。)
Preparing to unpack .../openssh-client_1%3a6.6p1-2ubuntu1_amd64.deb ...
Unpacking openssh-client (1:6.6p1-2ubuntu1) over (1:6.6p1-2ubuntu2) ...
Processing triggers for man-db (2.6.7.1-1) ...
正在設置 openssh-client (1:6.6p1-2ubuntu1) ...

　可以看到,提示了系統中openssh-client被降級,這樣再安裝openssh-server就可以成功了!

　　3、查看SSH 目錄 /etc/ssh 下是否有密鑰文件

　　如果沒有這兩個文件，需要自己生成。輸入以下命令。　　

#ssh-keygen -t dsa -f /etc/ssh/ssh_host_dsa_key
#ssh-keygen -t rsa -f /etc/ssh/ssh_host_rsa_key

　　生成密鑰文件時，會提示輸入密碼，這裡我們不輸入密碼，預設按回車

　　可以用“passwd 用戶” 來修改ssh的登錄密碼。

　　4、啟動ssh　　　　

/etc/init.d/ssh status 查看ssh狀態 
/etc/init.d/ssh start  啟動ssh
/etc/init.d/ssh restart 重啟ssh

　　5、測試ssh 是否安裝成功

三、配置SSH免密碼登錄

　　1、輸入 ssh-keygen  -t rsa

$ssh-keygen  -t rsa 
Generating public/private rsa key pair.
Enter file in which to save the key （/root/.ssh/id_rsa）：
/*回車，設置預設路徑*/
Enter passphrase （empty for no passphrase）：
/*回車，設置空密碼*/
Enter same passphrase again：
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.

如果是root用戶，則在/root/.ssh/目錄下生成一個私鑰id_rsa和一個公鑰id_rsa.pub。

　　2、將id_rsa.pub 文件 寫入 authorized_keys 

          cat id_rsa.pub >> ~/.ssh/authorized_keys  

　　　查看 /root/.ssh目錄

　3、裝id_rsa.pub 文件發送到遠程機器上

　　scp id_rsa.pub [email protected]：/home

　　cat /home/id_rsa.pub >> /root/.ssh/authorized_keys

　　這樣ssh登錄遠程機器就不需要密碼了。

四、安裝Hadoop

　　1、下載安裝Hadoop2.2.0

　　2、解壓tar包　　

$ sudo tar-vxzf hadoop-2.2.0.tar.gz -C /usr/local
$ cd /usr/local
$ sudo mv hadoop-2.2.0 hadoop
$ sudo addgroup hadoop   添加hadoop組
$ sudo adduser -ingroup hadoop hadoop  添加hadoop用戶
$ sudo chown -R hduser：hadoop hadoop  授權

　　3、查看Hadoop包是32位還是64位