基于php+shell的发布系统

一.发布系统要解决的问题

　　一个比较完善的发布系统首先肯定是要能发布文件，其次当发布出现问题时要能支持撤销，避免长时间无法解决问题影响产品的正常运营。
对于发布脚本语言如PHP,shell加入语法检查,有语法错误阻止本次发布。

二.原理

　　我们正在使用的发布系统基于PHP+shell开发,发布的时候填好文件列表，从当前机器A发布到目标机器B,发布之前A机器通过ssh协议认证登陆到B机器执行shell命令备份待发布的文件列表
然后使用rsync从A机器同步文件列表到B机器,发布完成后写入当前发布记录到数据库,当需要回滚的时候将对应的备份文件覆盖到B机器即可。

三.要解决的问题

1.使用rsync以及备份目标机器文件需要免密登陆

　　A机器到B机器实现免密登陆,需要使用ssh-keygen生成当前用户的登陆秘钥,把当前用户的公钥追加到目标机器用户的 .ssh/authorized_keys文件中
以下shell是把当前机器的公钥追加到目标机器的authorized_keys文件

USER=www
IP=192.168.1.100 #B机器ip
PORT=22 #B机器SSH协议端口
cat /home/${USER}/.ssh/id_rsa.pub | ssh ${USER}@${IP} 'cat>>/home/${USER}/.ssh/authorized_keys'

后续无需输入密码即可在A机器免密登陆B机器

2.发布到多台机器
　　如果目标机器有多台,可以循环发布到目标机器。如果每次更新的文件过大,可以发布到一台中心节点服务器，然后使用sersync同步到其它机器。https://code.google.com/archive/p/sersync/downloads
修改config.xml rsync节点<ssh start="true"/>,并使用免密登陆的用户启动sersync服务

#!/bin/bash
#-------------------------------------------------------------------------------------------------------
#从当前机器发布文件到远程机器,如果是分布式机器,以一台机器为主节点通过sersync同步到其它节点
#
#
#参数说明
#    发布
#$1:执行动作send
#$2:远程目标机器ip
#$3:远程目标机器端口
#$4:当前机器发布根目录
#$5:远程目标机器发布根目录
#$6:远程目标机器备份根目录
#$7:发布版本号
#$8:文件列表 多个文件或者目录使用","隔开

#
#
#    回滚
#$1:执行动作roll
#$2:远程目标机器ip
#$3:远程目标机器端口
#$4:当前机器发布根目录
#$5:远程目标机器发布根目录
#$6:远程目标机器备份根目录
#$7:回滚版本号
#----------------------------------------------------------------------------------------------------

source /etc/profile
umask 022

readonly TARGET_IP=$2                        #远程目标机器ip
readonly TARGET_PORT=$3                        #远程目标机器ip
readonly USER=www                            #执行远程shell命令用户
readonly SOURCE_ROOT=$4                        #当前机器发布根目录
readonly TARGET_ROOT=$5                        #远程目标机器发布目录
readonly BACKUP_ROOT=$6                        #远程目标机器备份路径

readonly execssh="/usr/bin/ssh -p ${TARGET_PORT} -o StrictHostKeyChecking=no ${USER}@${TARGET_IP}" #在远程目标机器执行shell命令

#发布
function send(){
    IFS=","
    error=0
    aFile=($1)
    for file in ${aFile[@]}
    do
        if [ ! -e "${SOURCE_ROOT}/${file}" ];then
            fileList+={$file}
            error=1
        fi
    done

    if [ "${error}" != 0 ];then
        echo "file list is not exists in ${SOURCE_ROOT}"
        echo $fileList
        exit 1
    fi

    eval "${execssh} ${TARGET_ROOT}/cron/sendfile.sh backup ${1} ${2} ${TARGET_ROOT} ${BACKUP_ROOT}"
    
    if [ "$?" == 0 ];then
        cd ${SOURCE_ROOT}
        fileList=$(echo "${1}" | tr "," " ")
        #/usr/bin/rsync -avzR -e ssh ${fileList} ${USER}@${TARGET_IP}:${TARGET_ROOT}
        eval "/usr/bin/rsync -avzR '-e ssh -p ${TARGET_PORT}' ${fileList} ${USER}@${TARGET_IP}:${TARGET_ROOT}"
    else
        echo "back up faild!!!"
        exit 2
    fi
    exit 0
}

#回滚
function roll(){
    $execssh "tar zxf ${BACKUP_ROOT}/${1}.bak.tar.gz -C ${TARGET_ROOT}"
    echo 'ok'
}

#备份
function backup(){
    target_root=$3
    back_root=$4
    cd ${target_root}
    IFS=","
    aFile=($1)
    fileList=""
    for file in ${aFile[@]}
    do
        if [ -e "${target_root}/${file}" ];then
            fileList+="$file "
        fi
    done
    if [ -n "${fileList}" ];then
        if [ ! -d ${back_root} ];then
            mkdir -p ${back_root}
            if [ "$?" != 0 ];then
                echo "mkdir backup dir ${back_root} fail"
                exit 1
            fi
        fi
        tar czf ${back_root}/${2}.bak.tar.gz $1
        if [ "$?" == 0 ];then
            echo "backup file ${back_root}/${2}.bak.tar.gz!"
        fi 
    fi
}

function argsCheck(){
    if [ -z $2 ] || [ -z $3 ] || [ -z $4 ] || [ -z $5 ] || [ -z $6 ] || [ -z $7 ];then
        echo "useage ${0} send|roll TARGET_IP TARGET_PORT SOURCE_ROOT TARGET_ROOT BACKUP_ROOT VER"
        exit 1
    fi
    if [ ! -d $4 ];then
        echo "SOURCE_ROOT ${SOURCE_ROOT} is not exsists!"
        exit 2
    fi
}

case $1 in
    "send")
        argsCheck "$@"
        send $8 $7 #文件列表版本号
    ;;
    
    "backup")
        backup $2 $3 $4 $5
    ;;
    
    "roll")
        argsCheck "$@"
        roll $7 #版本号
    ;;
    
    *)
    echo "useage ${0} send|roll TARGET_IP TARGET_PORT SOURCE_ROOT TARGET_ROOT BACKUP_ROOT VER"
    ;;
esac

#!/bin/bash
#-------------------------------------------------------------------------------------------------------
#从当前机器发布文件到远程机器,如果是分布式机器,以一台机器为主节点通过sersync同步到其它节点
#
#
#参数说明
#    发布
#$1:执行动作send
#$2:远程目标机器ip
#$3:远程目标机器端口
#$4:当前机器发布根目录
#$5:远程目标机器发布根目录
#$6:远程目标机器备份根目录
#$7:发布版本号
#$8:文件列表 多个文件或者目录使用","隔开

#
#
#    回滚
#$1:执行动作roll
#$2:远程目标机器ip
#$3:远程目标机器端口
#$4:当前机器发布根目录
#$5:远程目标机器发布根目录
#$6:远程目标机器备份根目录
#$7:回滚版本号
#----------------------------------------------------------------------------------------------------

source /etc/profile
umask 022

readonly TARGET_IP=$2                        #远程目标机器ip
readonly TARGET_PORT=$3                        #远程目标机器ip
readonly USER=www                            #执行远程shell命令用户
readonly SOURCE_ROOT=$4                        #当前机器发布根目录
readonly TARGET_ROOT=$5                        #远程目标机器发布目录
readonly BACKUP_ROOT=$6                        #远程目标机器备份路径

readonly execssh="/usr/bin/ssh -p ${TARGET_PORT} -o StrictHostKeyChecking=no ${USER}@${TARGET_IP}" #在远程目标机器执行shell命令

#发布
function send(){
    IFS=","
    error=0
    aFile=($1)
    for file in ${aFile[@]}
    do
        if [ ! -e "${SOURCE_ROOT}/${file}" ];then
            fileList+={$file}
            error=1
        fi
    done

    if [ "${error}" != 0 ];then
        echo "file list is not exists in ${SOURCE_ROOT}"
        echo $fileList
        exit 1
    fi

    eval "${execssh} ${TARGET_ROOT}/cron/sendfile.sh backup ${1} ${2} ${TARGET_ROOT} ${BACKUP_ROOT}"
    
    if [ "$?" == 0 ];then
        cd ${SOURCE_ROOT}
        fileList=$(echo "${1}" | tr "," " ")
        #/usr/bin/rsync -avzR -e ssh ${fileList} ${USER}@${TARGET_IP}:${TARGET_ROOT}
        eval "/usr/bin/rsync -avzR '-e ssh -p ${TARGET_PORT}' ${fileList} ${USER}@${TARGET_IP}:${TARGET_ROOT}"
    else
        echo "back up faild!!!"
        exit 2
    fi
    exit 0
}

#回滚
function roll(){
    $execssh "tar zxf ${BACKUP_ROOT}/${1}.bak.tar.gz -C ${TARGET_ROOT}"
    echo 'ok'
}

#备份
function backup(){
    target_root=$3
    back_root=$4
    cd ${target_root}
    IFS=","
    aFile=($1)
    fileList=""
    for file in ${aFile[@]}
    do
        if [ -e "${target_root}/${file}" ];then
            fileList+="$file "
        fi
    done
    if [ -n "${fileList}" ];then
        if [ ! -d ${back_root} ];then
            mkdir -p ${back_root}
            if [ "$?" != 0 ];then
                echo "mkdir backup dir ${back_root} fail"
                exit 1
            fi
        fi
        tar czf ${back_root}/${2}.bak.tar.gz $1
        if [ "$?" == 0 ];then
            echo "backup file ${back_root}/${2}.bak.tar.gz!"
        fi 
    fi
}

function argsCheck(){
    if [ -z $2 ] || [ -z $3 ] || [ -z $4 ] || [ -z $5 ] || [ -z $6 ] || [ -z $7 ];then
        echo "useage ${0} send|roll TARGET_IP TARGET_PORT SOURCE_ROOT TARGET_ROOT BACKUP_ROOT VER"
        exit 1
    fi
    if [ ! -d $4 ];then
        echo "SOURCE_ROOT ${SOURCE_ROOT} is not exsists!"
        exit 2
    fi
}

case $1 in
    "send")
        argsCheck "$@"
        send $8 $7 #文件列表版本号
    ;;
    
    "backup")
        backup $2 $3 $4 $5
    ;;
    
    "roll")
        argsCheck "$@"
        roll $7 #版本号
    ;;
    
    *)
    echo "useage ${0} send|roll TARGET_IP TARGET_PORT SOURCE_ROOT TARGET_ROOT BACKUP_ROOT