大数据平台监控服务及自动重启脚本

[原创] 大数据平台监控服务及自动重启脚本

仧尐 2019-03-13 57 大数据

我们知道大数据平台有很多服务datanode,namenode,nodemananger,resourcemanager等等，这些服务可能会在跑任务的过程中直接退出，那么我们如何监控这些服务并重启服务呢？接下来总结一些这方面的监控脚本以备不时之需。 #### 1、Datanode监控（hadoop_datanode_monitor.sh） ```shell #!/bin/bash source $HOME/.bashrc function logger() { time=`date "+%Y-%m-%d %T"` echo "$time $1" } #monitor base function function proc_monitor() { if test $(ps -ef | grep -i proc_$1 | grep -v grep | wc -l) -eq 0;then logger "$1 not exists!, start $1 by monitor" hadoop-daemon.sh start $1 fi } #minitoring datanode proc_monitor "datanode" ``` #### 2、Namenode监控（hadoop_namenode_monitor.sh） ```shell #!/bin/bash source $HOME/.bashrc function logger() { time=`date "+%Y-%m-%d %T"` echo "$time $1" } #monitor base function function proc_monitor() { if test $(ps -ef | grep -i proc_$1 | grep -v grep | wc -l) -eq 0;then logger "$1 not exists!, start $1 by monitor" hadoop-daemon.sh start $1 fi } #minitoring namenode proc_monitor "namenode" ``` #### 3、NodeManager监控（hadoop_nodemanager_monitor.sh） ```shell #!/bin/bash source $HOME/.bashrc function logger() { time=`date "+%Y-%m-%d %T"` echo "$time $1" } #monitor base function function proc_monitor() { if test $(ps -ef | grep -i proc_$1 | grep -v grep | wc -l) -eq 0;then logger "$1 not exists!, start $1 by monitor" yarn-daemon.sh start $1 fi } #minitoring nodemanager proc_monitor "nodemanager" ``` #### 4、ResourceManager监控（hadoop_resourcemanager_monitor.sh） ```shell #!/bin/bash source $HOME/.bashrc function logger() { time=`date "+%Y-%m-%d %T"` echo "$time $1" } #monitor base function function proc_monitor() { if test $(ps -ef | grep -i proc_$1 | grep -v grep | wc -l) -eq 0;then logger "$1 not exists!, start $1 by monitor" yarn-daemon.sh start $1 fi } #minitoring resourcemanager proc_monitor "resourcemanager" ``` #### 5、HMaster监控（hbase_master_monitor.sh） ```shell #!/bin/bash source $HOME/.bashrc function logger() { time=`date "+%Y-%m-%d %T"` echo "$time $1" } #monitor base function function proc_monitor() { if test $(ps -ef | grep -i proc_$1 | grep -v grep | wc -l) -eq 0;then logger "$1 not exists!, start $1 by monitor" hbase-daemon.sh start $1 fi } #minitoring master proc_monitor "master" ``` #### 6、HRegionServer监控（hbase_regionserver_monitor.sh） ```shell #!/bin/bash source $HOME/.bashrc function logger() { time=`date "+%Y-%m-%d %T"` echo "$time $1" } #monitor base function function proc_monitor() { if test $(ps -ef | grep -i proc_$1 | grep -v grep | wc -l) -eq 0;then logger "$1 not exists!, start $1 by monitor" hbase-daemon.sh start $1 fi } #minitoring regionserver proc_monitor "regionserver" ```

注意！

本站用户原创文章，版权为本站用户，转摘请注明本文地址：https://www.itdaan.com/blog/2019/03/13/732ba06f0b2b1d2306101b05420ebe0b.html。

GreenPlum 大数据平台--监控大数据平台监控指标整理 GreenPlum 大数据平台--web监控 apache服务监控脚本-----自动重启apache apache服务监控脚本-----自动重启apache 大数据平台运维脚本大数据平台任务调度与监控系统大数据平台监控（二）：Ganglia与Nagios的整合 SHELL脚本实现服务宕机监控自动重启自动监控apache服务状态并重启的shell脚本