shell脚本监测elasticsearch集群节点

1、监测方案：

通过shell可配置化脚本，配置es集群中节点，然后通过shell中执行crul命令监测集群中所有节点是否正常，如果监测到节点不正常，那么就保存节点ip地址和端口号等信息，将异常的集群节点信息通过邮件通知管理员，让管理员尽快登陆服务器查看和解决集群中有问题的节点。

2、监测脚本：

脚本的大致思路就是在配置文件中配置集群中所有节点的ip和端口号，以及有异常要通知的管理员邮箱地址、邮件标题、邮件内容等。通过在sh脚本中遍历配置的集群节点的ip和端口号利用curl命令进行访问，监测该节点是否可以访问正常，如果有节点异常，那么就记录下节点ip和端口号，最终将所有异常节点信息邮件发送给配合的若干个管理员。

具体脚本如下：

（1）配置文件：

ipAddressAndPorts=192.168.99.164:9200,192.168.99.165:9200
curlPath=/usr/bin/curl
semdEmailTo=1123476897809@qq.com
sendEmailTitle=测试ES备份异常标题
sendEmailContent=测试ES备份异常内容。

（2）代码：

注意：不同linux设备的sh路径可能不同，需通过which sh查看sh的绝对路径修改即可。

#!/bin/sh
#db_backups_conf.txt文件路径
db_backups_conf="/wocloud/shell/es_cluster_config.txt"
 
#判断文件是否存在
if [ -f "${db_backups_conf}" ];then
    
    echo $(date +'%Y-%m-%d %H:%M:%S')" 发现文件配置信息文件存在"
 
    #获取等号前内容，作为map中的Key值
    dbArrOne=($(awk -F'[=]' '{print $1}' ${db_backups_conf} ))
    
    #获取等号后内容，作为map中的value值
    dbArrTwo=($(awk -F'[=]' '{print $2}' ${db_backups_conf}))
 
    #创建一个空map
    declare -A map=()
    
    #通过循环，将db_backups_conf配置文件中的信息存储在map中
    for((i=0;i<${#dbArrOne[@]};i++))
    do
        map[${dbArrOne[i]}]=${dbArrTwo[i]}
    done    
 
    #获取要监测集群节点IP和端口号组合的字符串
    ipPortsStr=${map["ipAddressAndPorts"]}
    
    #获取收件人的邮件账号的字符串
    semdEmailTo=${map["semdEmailTo"]}
    
    #获取默认的字符串分隔符
    old_ifs="$IFS"
    
    #设置字符串分隔符为逗号
    IFS=","
 
    #将要备份的索引名称value值的字符串进行分隔，获取一个数组
    ipPortArr=($ipPortsStr)
    
    #将收件人的邮件账号value值的字符串进行分隔，获取一个数组
    semdEmailToArr=($semdEmailTo)
 
    #将字符串的分隔符重新设置为默认的分隔符
    IFS="$old_ifs"
    
    
    #定义一个是否需要发送异常提醒邮件变量
    isSendEmailStr=0
    
    #定义一个出现异常集群节点ip和端口号存储的变量
    errorIpPort=""
    
    #执行命令，备份es数据
    {
    
        #遍历备份索引名称，逐个删除旧备份，重新全量备份
        for ipPort in ${ipPortArr[@]};
        do
        
            #检测es访问地址是否有效
            esStatus=$(curl -s -m 5 -IL http://${ipPort}|grep 200)
            if [ "$esStatus" == "" ];then
            
                echo $(date +'%Y-%m-%d %H:%M:%S')" es地址访问异常："${ipPort}
                isSendEmailStr=1
                errorIpPort=${errorIpPort}""${ipPort}","
            
            fi
            
        
        done
        
    } || {
        isSendEmailStr=1
    }
    
 
    #判断命令执行是否有异常，如果有异常就发送邮件
    if [ ${isSendEmailStr} == "0" ];then
            echo $(date +'%Y-%m-%d %H:%M:%S')" 执行es集群节点监测全部正常"
        else 
            echo $(date +'%Y-%m-%d %H:%M:%S')" 执行es集群节点监测有异常，开始发送邮件通知管理员"
            
            #遍历收件人的邮箱地址，逐个发送邮件
            for email in ${semdEmailToArr[@]};
            do
                echo $(date +'%Y-%m-%d %H:%M:%S')" 开始发送邮件："${email}
 
                echo ""${map["sendEmailContent"]}",异常节点信息如下："${errorIpPort} | mail -s ""${map["sendEmailTitle"]} ${email}
            done
            
            echo $(date +'%Y-%m-%d %H:%M:%S')" 执行es集群节点监测有异常，成功发送邮件通知管理员"
    fi
    
    echo $(date +'%Y-%m-%d %H:%M:%S')" 脚本执行完毕"
 
 
else
    echo "文件不存在"
fi

（3）配置参数说明：

参数意义如下：
ipAddressAndPorts=节点IP:端口号，多个节点用逗号分隔，注意冒号、逗号都必须是英文的
curlPath=命令curl绝对路径
semdEmailTo=收件人邮箱，多个收件人邮箱用逗号隔开
sendEmailTitle=测试邮件主题（文本内容中一定不能包含=）
sendEmailContent=测试邮件内容（文本内容中一定不能包含=）

（4）注意事项说明

使用注意事项：
1、默认的是.sh、.txt文件都要放在/woclod/shell脚本下，如果放置的路径变了，需要修改.sh中读取.txt配置文件的路径
2、备份异常发送邮件提醒采用的是mail，运行的linux上提前先安装好mail并配置到mail.rc发送邮件的信息才可以。