安裝須知: 所有操作都要使用root用戶,且系統不要有其他用戶,ssh的密鑰也都是基於root用戶的。否則會出現問題【Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password) 】 hostname都要使用FQDN格式,具體 ...
安裝須知:
- 所有操作都要使用root用戶,且系統不要有其他用戶,ssh的密鑰也都是基於root用戶的。否則會出現問題【Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password) 】
- hostname都要使用FQDN格式,具體參照【配置】的第三步
- 所有節點都安裝ntpd服務 可參考CentOS7 中使用NTP進行時間同步
安裝:
- 在 hortonworks公共資源庫 選定一個ambari版本並複製對應的repo地址(這個網頁的內容載入很慢 要耐心等)。我選的是2.4.2 地址是http://s3.amazonaws.com/public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.4.2.0/ambari.repo。
- 使用wget下載到節點,或者下載到物理機後上傳到節點
wget http://s3.amazonaws.com/public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.4.2.0/ambari.repo #文件會下載到當前目錄
- 將ambari.repo文件拷貝到 /etc/yum.repos.d/ 目錄下
mv ambari.repo /etc/yum.repos.d/
- 獲取該公共庫的所有源文件列表
yum clean all yum list|grep ambari
- 開始安裝server
yum install ambari-server
如果依賴項postgresql下載失敗,需要手動下載安裝;點這裡 下載一個並安裝就可以了
wget ftp://mirror.switch.ch/pool/4/mirror/scientificlinux/7.2/x86_64/updates/security/postgresql-libs-9.2.15-1.el7_2.x86_64.rpm; rpm -ivh postgresql-libs-9.2.15-1.el7_2.x86_64.rpm
- 安裝完成後,開始進行配置(全部用預設項 全程回車)。其中有一步 需要指定用戶賬號,要記住使用root
ambari-server setup
- 配置完成就可以啟動了,然後 就可以用8080埠訪問管理頁面了
ambari-server start
配置集群:
安裝成功後,就需要在WEBUI中創建集群了。點擊【Launch Install Wizard】
1.GetStarted 指定集群名
2.Select Version 選擇HDP版本。HDP版本對應的是一組生態組件的版本。根據自己需要的組件版本選擇一個即可。我選擇的是HDP-2.5
下麵的內容,使用公共資源庫即可。【Skip ……】這個也不用選,進入下一步。
3.Install Options 安裝配置。這一步要謹慎
Target Hosts要指定Hosts列表,這個hostname的格式必須是Fully Qualified Domain Name (FQDN),簡單點說,必須是一個功能變數名稱的格式,如下圖所示。/etc/hosts當然也要與之對應
Host Registration Information 這裡要選擇使用私鑰,並上傳作為Ambari的主機的私鑰,當然也可以直接粘貼私鑰的內容 註:id_dsa是私鑰,id_dsa.pub 是公鑰。UserAccount使用root 埠不用改
4.Confirm Hosts
從上一步過來後,在這一步會自動節點註冊,並會顯示進度及註冊狀況
可以點擊①查看有哪些註冊過程中缺少的內容
5.Choose Services 選擇集群中需要安裝的服務
有些服務是必須得,或者是被依賴的,如果沒選的 點擊下一步的時候會有提示。
6.Assign Masters 給各節點組件分配資源,這個自己看著來就行
7.Assign Slaves and Clients 配置從節點和客戶端。註意最後一列的Client指的是各種客戶端,而不是某一種。
8.Customize Service 服務的自定義設置
這一步里大部分都可以使用預設項,少部分需要改動和設置,如Hive和Oozie需要指定資料庫密碼等
紅色數字標誌表示這一項有需要手動設置的內容。
此外,如果Hive和Oozie使用Mysql的話,還需要先安裝MySql,然後創建hive,oozie用戶並賦予許可權,當然 還有hive、oozie資料庫
具體操作可參考 CentOS7minimal MySql的卸載及安裝
還要在ambari server上執行
ambari-server setup --jdbc-db=mysql --jdbc-driver=[/path/to/mysql/mysql-connector-java.jar]
如果有不合適的參數,是無法進入下一步的,點擊下一步的時候系統會提示需要改成的值。
9.Review 提供一個總結的安裝列表,供用戶審閱並提供列印功能
10.Install,Start and Test 開始安裝和測試。這一步會花費較長時間,因為需要線上下載安裝各種組件。
這一步可能會失敗多次,不過不要慌 這基本是網路因素,不斷重試就可以了
參考: