WatchDogでプロセスを監視して、落ちたら自動で復帰させる

Linuxで特定のプロセスを監視して、万一そのプロセスが落ちてしまったとき、自動で復帰させるというはサーバで時折、使われる手段だと思います。　

　

実は、Volumioのシステムの中でも同様のことをやっています。　

ということで、有機ELディスプレイ表示のプログラムが何かしらの要因で落ちてしまったとき、なにくわぬ顔で復帰させてしまおう。　というのが今回のお話です。　

本当は、どんな状況でもプロセスが落ちないようにプログラムしておくべきだとは思うのですが、こういう手段もあるってことで。。。  ご勘弁ください。　

では、早速みてみましょう。

volumioでは下記のプログラム（WatchDog）でphpのプロセス数をカウントして、多すぎるときにプレーヤーソフト（player_wrk.php）を強制的にkillして再起動しています。　

/var/www/command/player_wdog.sh

-------------------------------------------

numproc=`pgrep -c php5-fpm`
numproc2=`pgrep -c python`
WRKPIDFILE='/run/player_wrk.pid'
# check player_worker exec
if [[ !(-x "/var/www/command/player_wrk.php") ]]
then 
     chmod a+x /var/www/command/player_wrk.php
fi

while true
do
     if (($numproc > 15)); then
          killall player_wrk.php
          rm $WRKPIDFILE > /dev/null 2>&1
          service php5-fpm restart > /dev/null 2>&1
    fi
    if ! kill -0 `cat $WRKPIDFILE` > /dev/null 2>&1; then
          rm $WRKPIDFILE > /dev/null 2>&1
          if [ "$1" == "startup" ]; then
               sleep 15
           fi
           /var/www/command/player_wrk.php > /dev/null 2>&1
     fi
     if(($numproc2 < 1)); then
           /usr/bin/python2 /root/oled_ctrl2.py 2>&1
     fi
     sleep 10
     numproc2=`pgrep -c python`
     numproc=`pgrep -c php5-fpm`
done

-----------------------------------------------

ピンク文字が、今回追加させてもらった部分です。　

pgrep -c というコマンドで、プロセス数をカウントしてます。　　

有機EL表示はpyhonで組んでいるので、そのプロセス数をみて、１以下、つまり「0」だったら、起動させるようにしました。　10秒おきに監視しているのが判りますね。　　

非常にシンプルで、わかりやすいプログラム（bash）だと思います。　　

似たようなことをしたいときに、参考にどうぞ。　

ちなみに、有機EL表示プログラムが落ちる要因は、WebRadioが受信できなくてデータが取得できなくなったときや、NAS接続ができなくてmpcコマンドから正常な回答が得られないときがあるようです。　タイミング的な部分もあるようです。　

他にもあるかもしれません。　ひとつひとつの動作を解析して、異常終了しないようなエラー処理を入れていくのが本当は良いのでしょうけど、今回のような手段で、まとめてエラー処理（再起動）してしまうという、手抜きもアリではないでしょうか。　

にほんブログ村
ブログランキングに参加中です。　めざせ１位！　
もしよろしければ「ぽちっと」お願いします。　

---