Linux下zookeeper集群搭建

部署前準備

1. 下載zookeeper的安裝包
   　http://zookeeper.apache.org/releases.html 我下載的版本是zookeeper-3.4.10。

2. 準備三台伺服器
   ip地址為：

   172.16.18.198
   172.16.18.199
   172.16.18.200

3. 檢查jdk版本，安裝jdk環境，jdk需要1.7以上。

安裝zookeeper

1.三台伺服器分別上傳zookeeper安裝包，上傳到/opt/目錄下，然後tar zxvf zookeeper-3.4.10.tar.gz

2.拷貝zoo_sample.cfg 為zoo.cfg 修改/opt/zookeeper-3.4.10/conf/zoo.cfg配置文件，添加如下內容：

server.1=172.16.18.198:2888:3888
server.2=172.16.18.199:2888:3888
server.3=172.16.18.200:2888:3888

3.修改zookeeper數據文件存放目錄

dataDir=/data/zookeeper

此時zoo.cfg 配置文件內容為：

# The number of milliseconds of each tick
tickTime=2000 ##zookeeper單位時間為2ms
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10  ##對於從節點最初連接到主節點時的超時時間，單位為tick值的倍數。即20ms
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5   ##對於主節點與從節點進行同步操作時的超時時間，單位為tick值的倍數。即10ms
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/data/zookeeper
# the port at which the clients will connect
clientPort=2181  ##客戶端鏈接埠
# the maximum number of client connections.
# increase this if you need to handle more clients
maxClientCnxns=60 ##客戶端最大鏈接數
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=172.16.18.198:2888:3888  
server.2=172.16.18.199:2888:3888
server.3=172.16.18.200:2888:3888

4.新建myid文件

在三台伺服器的數據存放目錄下新建myid文件，並寫入對應的server.num 中的num數字
如：在172.16.18.198上將server.1中1寫入myid

echo 1 >/data/zookeeper/myid

5.添加環境變數，方便我們執行腳本命令

vi etc/profile 在最後添加如下兩個。

export ZOOKEEPER_HOME=/opt/zookeeper-3.4.9
export PATH=$PATH:$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf

保存後重新載入一下：

source /etc/profile

6.修改日誌存放目錄（可選）

vi /opt/zookeeper/bin/zkEnv.sh 找到ZOO_LOG_DIR 和 ZOO_LOG4J_PROP位置

if [ "x${ZOO_LOG_DIR}" = "x" ] 
then 
    #配置zookeeper日誌輸出存放路徑 
    ZOO_LOG_DIR="/var/applog/zookeeper" 
fi 

if [ "x${ZOO_LOG4J_PROP}" = "x" ] 
then 
    #配置日誌輸出級別,這裡把幾個級別一併配上 
    ZOO_LOG4J_PROP="INFO,CONSOLE,ROLLINGFILE,TRACEFILE" 
fi

編輯conf目錄下log4j.properties

# Define some default values that can be overridden by system properties 
zookeeper.root.logger=INFO, CONSOLE, ROLLINGFILE, TRACEFILE 
zookeeper.console.threshold=INFO 
zookeeper.log.dir=. 
zookeeper.log.file=zookeeper.log 
zookeeper.log.threshold=ERROR 
zookeeper.tracelog.dir=. 
zookeeper.tracelog.file=zookeeper_trace.log 
log4j.rootLogger=${zookeeper.root.logger}

完成log的日誌目錄的修改。

7.啟動zookeeper服務

zkServer.sh start來啟動。

zkServer.sh restart　　(重啟)

zkServer.sh status　　(查看狀態)

zkServer.sh stop　　(關閉)

zkServer.sh start-foreground　　(以列印日誌方式啟動)
三台伺服器分別執行：

zkServer.sh start

然後用 status 檢查下狀態 如果出現 Mode：leader 或者Mode:follower 表示搭建成功。否則前臺執行看一下日誌。

$ zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.10/bin/../conf/zoo.cfg
Mode: follower

如出現：

2019-04-29 14:04:05,992 [myid:3] - INFO  [ListenerThread:QuorumCnxManager$Listener@739] - My election bind port: /172.16.18.200:3888
2019-04-29 14:04:06,019 [myid:3] - INFO  [QuorumPeer[myid=3]/0:0:0:0:0:0:0:0:2181:QuorumPeer@865] - LOOKING
2019-04-29 14:04:06,025 [myid:3] - INFO  [QuorumPeer[myid=3]/0:0:0:0:0:0:0:0:2181:FastLeaderElection@818] - New election. My id =  3, proposed zxid=0x0
2019-04-29 14:04:06,056 [myid:3] - WARN  [WorkerSender[myid=3]:QuorumCnxManager@588] - Cannot open channel to 1 at election address /172.16.18.198:3888
java.net.NoRouteToHostException: 沒有到主機的路由
        at java.net.PlainSocketImpl.socketConnect(Native Method)
        at java.net.AbstractPlainSocketImpl.doConnect(AbstractPlainSocketImpl.java:345)
        at java.net.AbstractPlainSocketImpl.connectToAddress(AbstractPlainSocketImpl.java:206)
        at java.net.AbstractPlainSocketImpl.connect(AbstractPlainSocketImpl.java:188)
"zookeeper.log" 303L, 35429C

報這種異常一般有三種情況：

1）：zoo.cfg配置文件中，server.x:2888:3888配置出現錯誤；

2）：myid文件內容和server.x不對應，或者myid不在data目錄下；

3）：系統防火牆是否在啟動。

我檢查了三種原因後發現是防火牆running。

centos7下查看防火牆狀態的命令：

firewall-cmd --state

關閉防火牆的命令：

systemctl stop firewalld.service
systemctl disable firewalld.service   （禁止開機啟動，永久關閉防火牆）

關閉防火牆後重啟即可。
8.驗證是否成功
在命令行中輸入：zkCli.sh -server 172.16.18.198:2181（由於本人在不同的辦公地點在修改該文章，所以ip地址也在變化，知道原理即可）即可連接到其中一臺ZooKeeper伺服器。其他自動實現同步，客戶端只需要和一臺保持連接即可。出現如下表示鏈接成功

WATCHER::

WatchedEvent state:SyncConnected type:None path:null
[zk: 172.16.18.198:2181(CONNECTED) 0]