shell腳本實現伺服器進程監控

• 寫作背景：

　　項目是基於java、weblogic及timer的處理模式，每次服務部署之後timer的整體狀態是一個盲區，因為100多個進程，是否有啟動遺漏或者啟動重覆的，想做到一目瞭然是件困難的事情。所以我考慮用shell腳本的文件查找與匹配方法來解決這個問題，簡單記錄下，僅供參考。

• 程式說明：

1）通過將系統定義的進程（timer）配置到配置文件process_signal.config中

2）將伺服器當前所有的java進程存儲到process_current.txt中

3）逐行讀取process_signal.config中的進程，到process_current.txt中進行匹配

4）沒有匹配到則為啟動遺漏，存入到process_invalid.txt中，匹配到1次正常（不做處理），匹配到大於1次，則將timer名稱及啟動次數記錄到process_invalid.txt中。

5）通過定時器30分鐘一次執行腳本，使用SQLLOAD將process_invalid.txt載入到數據表中，對資料庫表進行監控。

•  腳本說明：

1、整體文件結構： 

webusr@iomtimer1:/weblogic/script/process_signal >ls

process_current.txt 　　 process_invalid.txt 　　 process_invalid_his.txt 　　 process_signal.config 　　 process_signal.sh

2、進程配置示例：

webusr@iomtimer1:/weblogic/script/process_signal >cat process_signal.config 

#停複發NAS
extapp.tftonas.PutTfToNas 10 2
extapp.tftonas.PutTfToNas 11 2
extapp.tftonas.PutTfToNas 12 3

3、執行結果記錄： 

webusr@iomtimer1:/weblogic/script/process_signal >cat process_invalid.txt 

127.0.0.1 process [extapp.leaseroute.PutToLeaseRoute 180] is not exist 2018-04-11 08:29:00
127.0.0.1 process [ DealWorkTaskTimer 3001 ] is repeatRun 2 Times 2018-04-11 17:51:56

4、邏輯匹配入口：

webusr@iomtimer1:/weblogic/script/process_signal >cat process_signal.sh

#!/bin/sh

path=/weblogic/script/process_signal #腳本路徑
file_config=process_signal.config #配置文件名
file_result=process_invalid.txt #錯誤進程信息
file_tmp=process_current.txt #當前進程信息（全量，臨時）
if_get_exist="N" #是否輸出日誌（N不輸出，Y輸出）
hostip="127.0.0.1" #主機IP
currenttime=`date "+%Y-%m-%d %H:%M:%S"` #當前系統時間

#定義方法get_process_signal()
get_process_signal(){

　　# 轉儲上次記錄到歷時，追加
　　cat /weblogic/script/process_signal/process_invalid.txt >> process_invalid_his.txt
　　#清空錯誤進程信息，當前進程信息
　　>/weblogic/script/process_signal/process_invalid.txt
　　>/weblogic/script/process_signal/process_current.txt
　　#輸出當前時間並獲取主機上所有java類進程
　　echo "######################### get ps info time is: " $currenttime " #########################">>/weblogic/script/process_signal/process_current.txt
　　ps -ef|grep java >>/weblogic/script/process_signal/process_current.txt
　　echo "######################### get ps info time is: " $currenttime " #########################">>/weblogic/script/process_signal/process_current.txt

　　#逐條讀取配置文件process_signal.config
　　cat /weblogic/script/process_signal/process_signal.config | while read LINE
　　do
　　　　# 如果配置文件含有#號，則跳過不處理
　　　　if [[ `echo $LINE|cut -c1-1` != "#" ]]; then
　　　　　　#如果配置文件記錄在主機進程中存在
　　　　　　if [[ -n `find $path -name $file_tmp | xargs grep -w "$LINE"` ]]; then
　　　　　　　　#開關為Y，輸出到屏幕
　　　　　　　　if [[ $if_get_exist = "Y" ]]; then
　　　　　　　　　　echo $hostip " process [" $LINE "] is exist " $currenttime >>/weblogic/script/process_signal/process_invalid.txt
　　　　　　　　fi
　　　　　　　　#配置文件記錄與主機進程匹配
　　　　　　　　run=`find $path -name $file_tmp | xargs grep -w "$LINE"|wc -l`
　　　　　　　　if (($run>1)); then
　　　　　　　　　　#列印配置文件中記錄與主機進程匹配數大於1的記錄
　　　　　　　　　　echo $hostip " process [" $LINE "] is repeatRun "$run " Times" $currenttime >>/weblogic/script/process_signal/process_invalid.txt
　　　　　　　　fi
　　　　　　　　#如果配置文件記錄在主機進程中不存在
　　　　　　else
　　　　　　　　echo $hostip " process ["$LINE"] is not exist " $currenttime >>/weblogic/script/process_signal/process_invalid.txt
　　　　　　fi
　　　　fi
　　done
}
#調用方法
get_process_signal

#fhs.workflow.EventMonitorMain 4
#find /weblogic/script/process_signal -name process_current.txt | xargs grep -i "fhs.workflow.EventMonitorMain 4"
#ps -ef|grep java|grep "fhs.workflow.EventMonitorMain 4"

5、SqlLOAD入庫（含控制文件conl.ctl）

efile92@iomitfdb2:/interface/contabfile/monitor_time >cat conl.ctl
load data
infile '/interface/contabfile/monitor_time/process_invalid.txt'
truncate into table T_MONITOR_TIMER
fields terminated by '\n'

-- Create table
create table T_MONITOR_TIMER
(
　　info VARCHAR2(1000)
)

sqlldr userid=用戶名/密碼@sid control=/interface/contabfile/monitor_time/conl.ctl log=/interface/contabfile/monitor_time/conl.log