脚本之家，脚本语言编程技术及教程分享平台！
分类导航

Python|VBS|Ruby|Lua|perl|VBA|Golang|PowerShell|Erlang|autoit|Dos|bat|shell|

服务器之家 - 脚本之家 - shell - shell脚本实现Hbase服务的监控报警和自动拉起问题

shell脚本实现Hbase服务的监控报警和自动拉起问题

2023-03-06 13:35时间的往事 shell

这篇文章主要介绍了shell脚本实现Hbase服务的监控报警和自动拉起,主要是通过服务名监控和端口监控，通过企业微信消息通知脚本，对此内容感兴趣的朋友跟随小编一起看看吧

需求说明

期初是我们的物理机上安装了Hbase，由于物理机硬件配置还可以，1T内存，64核。
只有4台机器，我们装完Hbase后，发现应用请求比较多，导致RegionServer经常挂掉。
但是机器本身资源使用率并不高，因此我们希望在一个节点上启用多个RegionServer服务。

如果一个节点启动2个RegionServe服务，那么通过服务名称方式就无法监控每个服务，所以改用了端口监控的方式。
当服务出现异常挂掉后，可以自动报警，并自动拉起该服务。

1. 通过服务名监控

monitor_regionserver.sh

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
#!/bin/sh
# 必须配置，引入环境变量；不然使用crond 定时执行脚本无法启动Java应用
 
source /etc/profile
 
#当前时间
now=`date +"%Y-%m-%d %H:%M:%S"`
file_name="/opt/local/listen/monitor.log"  #重启脚本的日志，保证可写入，保险一点执行 chmod 777 data.log
pid=0
hostname=`hostname`
 
proc_num()
{
    num=`ps -ef | grep 'HRegionServer' | grep -v grep | wc -l`
    return $num
}
proc_id()
{
    pid=`ps -ef | grep 'HRegionServer' | grep -v grep | awk '{print $2}'`
}
 
proc_num  #执行proc_num()，获取进程数
number=$?  #获取上一函数返回值
 
if [ $number -eq 0 ];then
 
    /opt/local/hbase/bin/hbase-daemon.sh start regionserver
    sleep 5
    proc_id
    echo "${now} 应用服务：HRegionServer不存在，正在重启服务，进程号 -> ${pid}" >> $file_name  #把重启的进程号、时间 写入日志
    /opt/local/listen/weixin.sh "生产服务器:${hostname} HRegionServer已停止，正在重启服务,PID -> ${pid}"
else
    proc_id
    echo "${now}  应用服务：HRegionServer 正常,进程号-> ${pid}"  >> $file_name
fi

2. 通过端口监控

端口监控有2个脚本，一个是监控脚本listen_port.sh，一个用来执行的脚本monitor_port.sh。
monitor_port.sh可以直接用命令代替。

脚本listen_port.sh，用来监听指定端口的RegionServer，运行时需要指定端口号。

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
#!/bin/sh
source /etc/profile
 
#指定脚本路径
script_path=/opt/local/listen/
 
if [ $# != 2 ];then
   echo '请输入端口和Hbase的路径'
   exit 1;
fi
 
port=$1
hbase_home=$2
 
echo '正在监听端口号：' $port
 
 
#当前时间
now=`date +"%Y-%m-%d %H:%M:%S"`
file_name=${script_path}"monitor.log"  #重启脚本的日志，保证可写入，保险一点执行 chmod 777 data.log
pid=0
hostname=`hostname`
proc_num()
{
    num=`netstat -nltp | grep ${port} |awk '{print $4}'|grep -v grep|wc -l`
    return $num
}
proc_id()
{
    pid=`netstat -nltp | grep ${port} |awk '{print $7}'|cut -d/ -f1`
}
 
 
proc_num  #执行proc_num()，获取进程数
number=$?  #获取上一函数返回值
 
if [ $number -eq 0 ];then
 
    $hbase_home/bin/hbase-daemon.sh start regionserver
    sleep 5
    proc_id
    echo "${now} 应用服务：HRegionServer不存在，正在重启服务，端口:${port} 进程号:${pid}" >> $file_name  #把重启的进程号、时间 写入日志
    ${script_path}/weixin.sh "测试服务器:${hostname}:${port} HRegionServer已停止，正在重启服务,PID -> ${pid}"
 
else
    proc_id
    echo "${now} HRegionServer 正常,端口:${port} 进程号:${pid}"  >> $file_name
fi

脚本monitor_port.sh，用来执行listen_port.sh脚本。

?
1
2
3
4
5
#!/bin/sh
source /etc/profile
/opt/local/listen/listen_port.sh 16020 /opt/local/hbase/
sleep 1
/opt/local/listen/listen_port.sh 16120 /opt/local/hbase2/

3. 企业微信消息通知脚本

微信报警脚本weixin.sh,将下面的xxxxxxxxx换成自己的key就好。

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
#!/bin/bash
content=${@:1}
content=${content//\ /}
content=${content//\"/}
date=$(date +%Y-%m-%d)
time=$(date "+%H:%M:%S")
content="
**Hbase**
    >告警时间：$date.$time
    >告警详情：$content
 
"
webHookUrl="https://qyapi.weixin.qq.com/cgi-bin/webhook/send?key=xxxxxxxxxxxxxxxxxx"
content='{"msgtype": "markdown","markdown": {"content": "'$content'","mentioned_list":"@all"},}'
echo "content : $content"
curl --data-ascii "$content" $webHookUrl
echo "over!"

4.定时调度

使用crontab每间隔1分钟执行一次。

?
1
2
3
4
5
# 监控服务名的
*/1 * * * * sh /opt/local/listen/monitor_regionserver.sh >/dev/null 2>&1
 
# 监控端口的
*/1 * * * * sh /opt/local/listen/monitor_port.sh >/dev/null 2>&1

5. 报警信息

报警信息样式可以自己在weixin.sh中定义，支持markdown写法。

shell脚本实现Hbase服务的监控报警和自动拉起问题

到此这篇关于shell脚本实现Hbase服务的监控报警和自动拉起的文章就介绍到这了,更多相关shell脚本Hbase服务监控报警内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家！

原文链接：https://www.cnblogs.com/30go/p/16873424.html

  • Shell
  • 监控
  • HBase

    • 延伸 · 阅读

    精彩推荐
    • shell利用kernel提供的接口打印进程号(pid)

      利用kernel提供的接口打印进程号(pid)

      我们知道linux是模块化的内核。实现模块、利用kernel提供的接口，首先了解写模块的基本框架。下面的c文件就是最基本的框架，当然还有怎样添加一些符号...

      脚本之家8362022-12-22
    • shellShell逐行读取文件的4种方法

      Shell逐行读取文件的4种方法

      这篇文章主要介绍了Shell逐行读取文件的4种方法,本文介绍了while循环法、重定向法、管道法、文件描述符法等一些方法,需要的朋友可以参考下...

      shell教程网6552022-12-04
    • shellShell日志分析常用命令和例子

      Shell日志分析常用命令和例子

      这篇文章主要介绍了Shell日志分析常用命令和例子,本文重点在一样实现日志分析命令语句例子上,本文给出了10条常用的分析实例,需要的朋友可以参考下...

      shell教程网5792023-02-23
    • shellvtune自动化安装脚本

      vtune自动化安装脚本

      这篇文章主要介绍了vtune自动化安装脚本,需要的朋友可以参考下...

      脚本之家9572023-02-08
    • shellshell脚本运行5秒后自动退出的代码

      shell脚本运行5秒后自动退出的代码

      shell脚本运行5秒自动退出的代码，供大家学习参考...

      shell编程教程12082022-12-13
    • shelllinux中mysql备份shell脚本代码

      linux中mysql备份shell脚本代码

      在linux中如果想定时备份数据库的脚本我们可以很方便简单的操作，下面我来分享一段mysql定时备份的脚本代码...

      shell教程网7312022-12-19
    • shellnginx日志切割脚本分享

      nginx日志切割脚本分享

      nginx日志太大怎么办，只有分割一下了，这篇文章就介绍了一下nginx日志切割脚本,需要的朋友可以参考下...

      脚本之家5832022-12-28
    • shellSED单行脚本快速参考(流编辑器)

      SED单行脚本快速参考(流编辑器)

      sed是一个非交互式的流编辑器。所谓非交互式，是指使用sed只能在命令行下输入编辑命令来编辑文本，然后在屏幕上查看输出...

      脚本之家8942022-12-07
    最近更新
    编辑推荐
    阅读排行
    热门标签
    多命令 　 监视进程 　 瑞士军刀 　 磁盘IO 　 系统负载 　 服务器配置文件 　 不回显 　 条件控制语句 　 快捷登陆 　 自动压缩 　 并发队列类 　 并发阻塞队列 　 终端会话 　 逻辑表达式 　 自动重启服务 　 比较符号 　 收取 　 shell脚本编程 　 linux shell 　 shell编程 　 shell变量 　 输出效果 　 if命令 　 掉包 　 模式空间 　 暂存空间 　 实时分流 　 次数控制 　 自动检测 　 数字打印 　
    © 2019-2023 脚本之家 | 服务器之家(www.tuohang.net)旗下站点 版权所有关于我们联系我们版权申明网站地图