rsync+inotify实时同步备份数据

rsync同步

rsync+inotify实时同步备份数据

软件简介:

rsync命令简介:

rsync命令是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件。
rsync使用所谓的“rsync算法”来使本地和远程两个主机之间的文件达到同步,这个
算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快。 rsync
是一个功能非常强大的工具,其命令也有很多功能特色选项,
来自: rsync命令

rsync [OPTION] SRC [USER@]HOST::DEST
rsync命令的选项:
  -a, archive 存档模式,等同于-rlptgoD (no -H,-A,-X)
  -u, update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件,不覆盖更新的文件。
  -z, compress 压缩传送
  -R, relative 使用相对路径信息。
   –timeout=time ip超时时间,单位为秒。
  –delete 删除那些DST中SRC没有的文件。

Inotify命令简介:

Inotify是一种强大的、细粒度的、异步文件系统监控机制,它满足各种各样的文件监控需要,
可以监控文件系统的访问属性、读写属性、权限属性、删除创建、移动等操作,也就是可以监
控文件发生的一切变化。
来自: inotifywait命令

inotifywait  [OPTION…][ … ]
  -m 是要持续监视变化。
  -r 使用递归形式监视目录。
  -q 减少冗余信息,只打印出需要的信息。
  -e 指定要监视的事件列表。

关于rsync和Inotify更多详细信息可以查看命令手册;
也可以参考Linux命令大全,


1477615117373128.png

1. 安装配置rsync

1.1. yum安装软件rsync

# 软件安装
# 检查执行结果:rpm -aq rsync
yum install -y rsync

# 添加用户
# 检查执行结果:id rsync
useradd rsync -s /sbin/nologin  -M

# 创建目录并修改属主
# 检查执行结果:ll /mydata/rsync
mkdir -p /mydata/rsync
chown -R rsync: /mydata/rsync

1.2. rsync配置

cp /etc/rsyncd.conf{,.bak}
cat <<EOF > /etc/rsyncd.conf
# /etc/rsyncd: configuration file for rsync daemon mode

uid = rsync
gid = rsync

use chroot = no
max connections = 100
pid file = /var/run/rsyncd.pid
transfer logging = yes
log file = /var/log/rsyncd.log
exclude = lost+found/
timeout = 900
ignore nonreadable = yes
dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2

[work]
      path = /mydata/rsync
      ignore errors
      read only = false
      list = false
      hosts allow = 10.10.20.0/24
      hosts deny = 0.0.0.0/0
      auth users = rsync_backup
      secrets file = /etc/rsynd.passwd

EOF

1.3. 虚拟用户secrets file

echo "rsync_backup:123456" > /etc/rsynd.passwd
chmod 600 /etc/rsynd.passwd

1.4. 启动rsync服务

systemctl start rsyncd

↑↑↑↑↑ On IP 10.10.20.79 ↑↑↑↑↑


↓↓↓↓↓ On IP 10.10.20.71 ↓↓↓↓↓↓

1.5. 测试rsync服务的同步功能

# 创建同步账户密码文件,仅需要密码,无须用户名
echo '123456' > /etc/rsync.passwd
# 提权
chmod 600 /etc/rsync.passwd
# 创建同步目录和测试文件
mkdir /mydata/rsync
echo 'just a test from IP 10.10.20.71' > /mydata/rsync/test

rsync -avz --password-file=/etc/rsync.passwd /mydata/rsync/ rsync_backup@10.10.20.79::work

2. 安装配置inotify

2.1. 下载软件

# 从网上下载程序,要求安装git
git clone https://github.com/rvoicilas/inotify-tools.git  /mydata/inotify-tools.git
# 编译安装inotify-tools
cd /mydata/inotify-tools.git
./autogen.sh 
# 编译三部曲
./configure --prefix=/usr/local/inotify
make && make install

2.2. 直接上脚本:

cat <<'EOF' > ~/bin/inotify.sh
#!/usr/bin/env bash
# -*- coding: utf-8 -*-
#
# Author: jacky18676887374@aliyun.com QQ 18676887374
# date: 20161027-10:05:20
# Vervion: 0.0.1
# Synopsis: COMAND
# 
# inotifywait COMMAND
Inotify="/usr/local/inotify/bin/inotifywait"
# inotifywait OPTION
Option_I='-mrq -e move,modify,delete,create,attrib'
# rsync OPTION
Option_R='-auz --delete --timeout=100  --password-file=/etc/rsync.passwd'
# rsync DEST
Dest='rsync_backup@10.10.20.79::work'
# backup file, inotify file; rsync SRC
Src="/mydata/rsync/"
#
########## judge ##########
if [ ! -e "$Src" ] \
|| [ ! -e "${Option_R##*=}" ] \
|| [ ! -e "${Inotify}" ] \
|| [ ! -e "/usr/bin/rsync" ];then
    echo "Check File and Folder"
    exit 9
fi
########## main ##########
$Inotify ${Option_I} $Src | while read file
    do
        rsync ${Option_R} $Src $Dest &> /dev/null
    done
exit 0
EOF

2.3. 修改执行权限并后台执行

chmod u+x ~/bin/inotify.sh
~/bin/inotify.sh &

原创文章,作者:昭其,如若转载,请注明出处:http://www.178linux.com/55125

(1)
上一篇 2016-10-28 08:36
下一篇 2016-10-28 09:07

相关推荐

  • MAN手册、Linux文件系统等介绍

    适合人群:Linux初学者 主要内容: Man手册使用介绍        FHS文件系统介绍        Linux文件类型介绍        随堂笔记 操作环境:CentOs 6.8 ☆ MAN 手册介绍 man手册…

    Linux干货 2016-10-18
  • Linux学习

    计算机的组成及功能 计算机硬件由运算器、控制器、存储器、输入设备和输出设备五大部件组成。运算器:进行算术和逻辑运算。控制器:负责协调和指挥整个计算机的工作存储器:存储程序、数据和文档。输入设备:用于将各种数据输入计算机中。输出设备:用于将计算机中的数据输出到相应设备上。   计算机软件总体分为系统软件和应用软件两大类:系统软件是各类操作系统,如wi…

    Linux干货 2017-12-03
  • 变量的高级操作

                                                  一  字符串切片 &nbsp…

    Linux干货 2017-04-16
  • LVS负载均衡wrrdpress

    项目要求:(1) lvs 调度两台 nginx+php-fpm real-server,采用 dr 模型,调度算法为 rr(2) mariadb 为 real-server 提供数据库,nfs 挂载至 2 台 real-server 提供文件服务项目环境:LVS-SERVER( CentOS 7 )DIP:172.18.99.6VIP:172.18.99.6…

    Linux干货 2017-05-16
  • M25初尝试部署RAID磁盘阵列组

    在学习了linux系统管理硬盘设备的基础后,现在尝试部署RAID10硬盘组技术,在部署前我们先了解一下什么叫“RAID”磁盘冗余阵列(Redundant Array of Independent Disks)。 RAID技术就是把多块硬盘设备组合成一个容量更大、更安全的硬盘组,可以把数据切割成多个区段后分别存在各个不同物理硬盘设备上,然后利用分散读写需求赖提…

    2017-07-12
  • linux文件系统(ext2\ext3\ext4,xfs,btrfs…)的介绍[转载]

    ext2\ext3\ext4,xfs,btrfs 都是针对服务器系统越来越高效实用的日志文件系统 日志文件系统:    日志文件系统是一种即使在断电或者是操作系统崩溃的情况下保证文件系统一致性的途径。XFS对文件系统元数据提供了日志支持。当文件系统更新时,元数据会在实际的磁盘块被更新之前顺序写入日志。XFS的日志被保存在磁盘块的…

    Linux干货 2017-01-31