大數據常用軟體安裝指南

一、基礎軟體安裝

1. Linux 環境下 JDK 安裝
2. Linux 環境下 Python 安裝
3. 虛擬機靜態 IP 及多 IP 配置

二、Hadoop

1. Hadoop 單機環境搭建
2. Hadoop 集群環境搭建
3. 基於 Zookeeper 搭建 Hadoop 高可用集群

三、Spark

1. Spark 開發環境搭建
2. 基於 Zookeeper 搭建 Spark 高可用集群

四、Storm

1. Storm 單機環境搭建
2. Storm 集群環境搭建

五、HBase

1. HBase 單機環境搭建
2. HBase 集群環境搭建

六、Flume

1. Linux 環境下 Flume 的安裝部署

七、Azkaban

1. Azkaban3.x 編譯及部署

八、Hive

1. Linux 環境下 Hive 的安裝部署

九、Zookeeper

1. Zookeeper 單機環境和集群環境搭建

十、Kafka

1. 基於 Zookeeper 搭建 Kafka 高可用集群

版本說明

由於 Apache Hadoop 原有安裝包之間相容性比較差，所以如無特殊需求，本倉庫一律選擇 CDH (Cloudera's Distribution, including Apache Hadoop) 版本的安裝包。它基於穩定版本的 Apache Hadoop 構建，並做了相容性測試，是目前生產環境中使用最為廣泛的版本。

最新的 CDH 5 的下載地址為：http://archive.cloudera.com/cdh5/cdh/5/ 。這個頁面很大且載入速度比較慢，需要耐心等待頁面載入完成。上半部分是文檔鏈接，後半部分才是安裝包。同一個 CDH 版本的不同框架間都做了集成測試，可以保證沒有任何 JAR 包衝突。安裝包包名通常如下所示，這裡 CDH 版本都是 5.15.2 ，前面是各個軟體自己的版本 ，未避免出現不必要的 JAR 包衝突，請務必保持 CDH 的版本一致。

hadoop-2.6.0-cdh5.15.2.tar.gz 
hbase-1.2.0-cdh5.15.2
hive-1.1.0-cdh5.15.2.tar.gz

更多大數據系列文章可以參見 GitHub 開源項目： 大數據入門指南