通过rsync+inotify实现数据实时备份同步

zoukankan html css js c++ java

通过rsync+inotify实现数据实时备份同步
一.环境描述

测试环境

需求：服务器A与服务器B为主备服务模式，需要保持文件一致性，现采用sersync基于rsync+inotify实现数据实时同步

环境描述：

主服务器172.26.7.50 ，从服务器172.26.7.51

实时同步/home/ 及/download 目录到从服务器

二.实施方法

1.从服务器172.26.7.51 rsync服务搭建

1.1下载软件包至从服务器
```
下载地址：http://rsync.samba.org/ftp/rsync/src
```
可根据环境需求下载相应的软件版本，本实验下载版本为rsync-3.1.1.tar.gz

1.2安装软件包

cd /usr/src
```
wget  http://rsync.samba.org/ftp/rsync/src/rsync-3.1.1.tar.gz
```
```
解压
```
```
tar xf rsync-3.1.1.tar.gz –C /opt/
```
```
mv /opt/rsync-3.1.1 /opt/rsync
```
```
cd /opt/rsync
```
```
./configure
```
```
make &&　make install
```
```
创建rsyncd.conf文件
```
```
vi /etc/rsyncd.conf
```
```
 
```
```
uid = root    #以root用户运行rsync服务
```
```
gid = root    #以root用户运行rsync服务
```
```
use chroot = no  #增加对目录文件软连接的备份
```
```
max connections = 1200  #最大连接数
```
```
timeout = 800    #超时时间
```
```
pid file = /var/run/rsyncd.pid   #PID存放位置
```
```
lockfile = /var/run/rsyncd.lock  #锁文件存放位置
```
```
log file = /var/log/rsyncd.log  #日志存放位置
```
```
[tongbu]  #认证模块名
```
```
path = /opt/tongbu   #同步A服务器的文件路径
```
```
ignore errors = yes  #忽略无关错误信息
```
```
hosts allow = 172.26.7.50   #允许访问IP
```
```
hosts deny = *　＃除了172.26.7.50主机外拒绝所有
```
```
read only = no #允许上传 
```
```
write only = no #允许下载
```
```
list = yes   #允许列出同步目录
```
```
auth users = root   #同步的用户
```
```
secrets file = /etc/rsync.pass  #存放用户密码的文件
```
```
###########可以配置多个同步模块
```
```
[download]
```
```
path = /download
```
```
ignore errors = yes
```
```
hosts allow = 172.26.7.50
```
```
hosts deny = *
```
```
read only = no
```
```
list = yes
```
```
auth users = root
```
```
secrets file = /etc/rsync.pass
```
```
注：/etc/rsync.pass 文件格式为username:password
```
```
文件权限必须为600否则服务不正常
```
```
 
```
```
hosts allow 定义可为单独IP也可为网段，网段格式为172.26.7.0/24
```
```
也可为172.26.7.0/255.255.255.0
```
```
创建rsync.pass文件
```
```
echo “root:password”>>/etc/rsync.pass
```
```
chmod 600 /etc/rsync.pass
```
1.3启动服务

rsync --daemon –v

echo “rsync --daemon –v”>>/etc/rc.local

开机自启动

2.主服务器172.26.7.50配置

2.1下载软件包

所需软件包为：

rsync-3.1.1.tar.gz inotify-tools-3.14.tar.gz sersync2.5.4_64bit_binary_stable_final.tar.gz
```
rysnc下载地址：wget  http://rsync.samba.org/ftp/rsync/src/rsync-3.1.1.tar.gz
```
```
inotify-tools下载：wget http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz
```
sersync下载：https://code.google.com/p/sersync/downloads

2.2软件安装

软件下载好之后解压安装

cd /usr/src
```
wget  http://rsync.samba.org/ftp/rsync/src/rsync-3.1.1.tar.gz
```
```
wget http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz
```
```
wget https://sersync.googlecode.com/files/sersync2.5.4_64bit_binary_stable_final.tar.gz
```
解压

tar xf rsync-3.1.1.tar.gz –C /opt

tar xf inotify-tools-3.14.tar.gz –C /opt

tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz –C /opt

cd /opt

mv rsync-3.1.1 rsync

mv inotify-tools-3.14 inotify-tools
```
mv GNU-Linux-x86 sersync
```
```
 
```
```
编译安装rsync
```
```
cd rsync
```
```
./configure && make && make install 
```
```
编译安装inotify-tools
```
```
cd inotify-tools
```
```
./configure && make && make install
```
```
 
```
2.3服务配置

配置sersync

cd sersync

cp confxml.xml confxml.xml_bak

vi confxml.xml

<?xml version="1.0" encoding="ISO-8859-1"?>

<head version="2.5">

    <host hostip="localhost" port="8008"></host>

    <debug start="false"/>

    <fileSystem xfs="false"/>

    <filter start="false">

        <exclude expression="(.*).svn"></exclude>

        <exclude expression="(.*).gz"></exclude>

        <exclude expression="^info/*"></exclude>

        <exclude expression="^static/*"></exclude>

    </filter>

    <inotify>

        <delete start="true"/>

        <createFolder start="true"/>

        <createFile start="false"/>

        <closeWrite start="true"/>

        <moveFrom start="true"/>

        <moveTo start="true"/>

        <attrib start="false"/>

        <modify start="false"/>

    </inotify>

    <sersync>

        <localpath watch="/opt/tongbu"><!—与从服务器同步的文件路径-->

            <remote ip="172.26.7.51" name="tongbu"/><!—与从服务器的模块名必须相同-->

        </localpath>

        <rsync>

            <commonParams params="-artuzlpog"/><!—rsync参数设置-->

            <auth start="true" users="root" passwordfile="/opt/sersync/user.pass"/>

            <userDefinedPort start="false" port="873"/>

            <timeout start="false" time="100"/>

            <ssh start="false"/>

        </rsync>

        <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/>

        <crontab start="false" schedule="600">

            <crontabfilter start="false">

                <exclude expression="*.php"></exclude>

                <exclude expression="info/*"></exclude>

            </crontabfilter>

        </crontab>

        <plugin start="false" name="command"/>

    </sersync>

</head>

########如果是多个目录同步需要起两个sersync进程同时需要两个启动配置文件

cp /opt/sersync/confxml.xml /opt/sersync/downxml.xml

vi /opt/sersync/downxml.xml

<?xml version="1.0" encoding="ISO-8859-1"?>

<head version="2.5">

    <host hostip="localhost" port="8008"></host>

    <debug start="false"/>

    <fileSystem xfs="false"/>

    <filter start="false">

        <exclude expression="(.*).svn"></exclude>

        <exclude expression="(.*).gz"></exclude>

        <exclude expression="^info/*"></exclude>

        <exclude expression="^static/*"></exclude>

    </filter>

    <inotify>

        <delete start="true"/>

        <createFolder start="true"/>

        <createFile start="false"/>

        <closeWrite start="true"/>

        <moveFrom start="true"/>

        <moveTo start="true"/>

        <attrib start="false"/>

        <modify start="false"/>

    </inotify>

    <sersync>

        <localpath watch="/download"><!—与从服务器同步的文件路径-->

            <remote ip="172.26.7.51" name="download"/><!—与从服务器的模块名必须相同-->

        </localpath>

        <rsync>

            <commonParams params="-artuzlpog"/><!—rsync参数设置-->

            <auth start="true" users="root" passwordfile="/opt/sersync/user.pass"/>

            <userDefinedPort start="false" port="873"/>

            <timeout start="false" time="100"/>

            <ssh start="false"/>

        </rsync>

        <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/>

        <crontab start="false" schedule="600">

            <crontabfilter start="false">

                <exclude expression="*.php"></exclude>

                <exclude expression="info/*"></exclude>

            </crontabfilter>

        </crontab>

        <plugin start="false" name="command"/>

    </sersync>

</head>

配置密码文件

echo “password”>>/opt/sersync/user.pass

注：文件权限必须为600否则启动异常

2.4服务启动

nohup /opt/sersync/sersync2 -r -d -o /opt/sersync/confxml.xml >/opt/sersync/rsync.log 2>&1 &

#######如果是多个目录同步需要启动两个进程

nohup /opt/sersync/sersync2 -r -d -o /opt/sersync/downxml.xml >/opt/sersync/downrsync.log 2>&1 &
```
-d:启用守护进程模式
```
```
-r:在监控前，将监控目录与远程主机用rsync命令推送一遍
```
```
-n:指定开启守护线程的数量，默认为10个
```
```
-o:指定配置文件，默认使用confxml.xml文件
```
```
开机启动写入/etc/rc.local文件中
```
```
 
```
```
验证
```
```
在主服务器上的/opt/tongbu及/home目录下创建文件查看从服务器172.26.7.51上是否有同步
```
查看全文

相关阅读:
T450的Fn lock
移民，不应该是走投无路后的选择
 门槛低的行业看天赋，门槛高的行业看毅力
 个人是时代的一朵浪花
 转载：XPath基本语法
 爪哇国新游记之三十四----Dom4j的XPath操作
 常去的论坛今天两个传统行业的坛友要下岗了
 异常中要了解的Throwable类中的几个方法
 感觉JVM的默认异常处理不够好，既然不好那我们就自己来处理异常呗！那么如何自己处理异常呢？
JVM对异常的默认处理方案

原文地址：https://www.cnblogs.com/jl-bai/p/5828088.html

通过rsync+inotify实现数据实时备份同步

一.环境描述

二.实施方法

1.从服务器172.26.7.51 rsync服务搭建

1.1下载软件包至从服务器

1.2安装软件包

1.3启动服务

2.主服务器172.26.7.50配置

2.1下载软件包

2.2软件安装

2.3服务配置

2.4服务启动