使用cwRsync实现windows下文件定时同步
1.参考文献：
2.背景：
当前的SCADA架构中，有1台Server，5台FE，还有1台Client。其架构如下图所示：
虽然叫法不同，但是他们的安装文件和配置文件是完全一样的。并且大多数情况下，也建议这些服务器上面的配置文件保持一致，这样只需要维护一个版本的config即可，不需要个性化定义每台服务器上面的config文件。由此也带来了一个新的问题，每当我在一台机器上面修改了配置文件，我还需要在其他6台机器上面做相同的修改，重复劳动非常多。由此产生了部署一套文件同步系统的想法，只需要在一台机器上做修改，其他机器自动定时同步即可。
3.解决方案：
在网上找到一些文件同步方案，最后决定使用cwRsync这个软件。cwRsync是基于cygwin平台的rsync软件包，支持windows对windows、windows对Linux、Linux对windows高效文件同步。由于CwRsync已经集成了cygwin类库，因此安装的时候可以省去cygwin包。Cwrsync还集成了OpenSSH for windows，可以实现Linux 下Rsync一模一样的操作。使用 cwRsync 来同步文件后，只需要对一台主服务器进行文件修改，其他镜像服务器可以自动同步，包括文件的更新、删除、重命名等。
cwRsync分为付费版和免费版两种，我们只需要使用免费版即可，在官方网站上面下载cwRsync的客户端版本和服务器版本。
客户端版本：cwRsync 4.0.5 Installer
服务器版本：cwRsyncServer 4.0.5 Installer
4.安装：
对于cwRsync的安装没有什么好说的，我选择的全部都是默认安装，对于服务器版本的安装，这里再多加一句，在安装过程中会提示要求我们输入Service account以及密码，如果我们不指定的话会使用SvcCWRSYNC这个账户，密码是随机生成的，所以要记住这个密码。但是在我后面的配置中，并没有用到这个Service account。
5.配置：
cwRsync的架构很简单，有一个Server和多个Client组成。安装server版的cwRsync以后，在服务器上面启动cwRsync服务，然后在客户端上面执行文件同步命令即可实现文件同步功能。如果我们将文件同步命令添加到windows计划任务当中，就可实现定义同步的功能。
5.1服务器端配置
在cwRsync的安装目录下，可以找到一个rsyncd.conf的配置文件，下面我根据自己实际的业务需求来讲名配置文件的修改方法，在第二节背景中我就已经讲到了，我有1台Server，5台FE，1台Client。我们的SCADA系统安装在这七台机器的相同目录下，都是D:\xxx，然后配置文件目录是D:\xxx\config，我要实现的目标就是：只要我修改Server这台机器的config目录，那么其他六台机器（5台FE和1台Client）就会自动同步相应的配置信息。
下面我将自己服务器端配置文件贴出来，在配置文件的下端，我们看到[config]标签，这就是我们需要同步的config目录，这里需要注意的就是对于文件目录名称的变更。我们看到配置文件中有一行写着”Remember cygwin naming conventions : c:\work becomes /cygwin/c/work“，也就是在windows系统下，目录地址为c:\work的，在我们的配置文件path中，需要修改为/cygwin/c/work。同样的，我们的当前想要同步的目录是D:\xxx\config，那么我就写成path = /cygdrive/d/xxx/config。其他的配置就按照给出的模板来配置即可。
use chroot = false strict modes = false hosts allow = * log file = rsyncd.log pid file = rsyncd.pid port = 8173 #默认端口8173 uid = 0 #不指定uid，不加这一行将无法使用任何账户 gid = 0 #不指定gid max connections = 10 #最大连接数10 # Module definitions # Remember cygwin naming conventions : c:\work becomes /cygwin/c/work # [config] path = /cygdrive/d/xxx/config #表示文件目录 read only = false transfer logging = yes lock file = rsyncd.lock #auth users = service-scada #认证用户名 #secrets file = rsync.password #认证用户的用户名和密码存储位置
在配置完毕以后，我们接下来就需要启动cwRsync的服务，我们将此服务设定为自动启动，如下图所示。
还有，在上面我们指定RsyncServer的端口是8173，我们可以通过netstat -an这个命令来检查8173端口是否被监听，如下图所示。
5.2客户端配置
在安装完cwRsync的客户端以后，我们看到默认的安装目录是C:\Program Files\cwRsync，我们记下这个安装目录，后面会用到这个安装目录。
在客户端上新建一个记事本，在记事本中输入以下信息：
1 c: 2 cd C:\Program Files\cwRsync\bin 3 rsync -av rsync://10.138.16.54:8173/config /cygdrive/d/xxx/config
然后再将此记事本重命名为config_rsync.bat，就形成了一个批处理文件。在批处理文件中，之所以需要添加第1、2行，是因为在安装cwRsync客户端的时候，并没有将cwRsync的程序目录添加到path这个环境变量当中，如果在环境变量path当中添加C:\Program Files\cwRsync\bin，则不需要在批处理中添加第1、2行。
第三行”rsync -av rsync://10.138.16.54:8173/config /cygdrive/d/xxx/config“的含义是从服务器同步config文件，同步到本地的D:\xxx\config目录下面。同步会以server上面的版本为准，如果在fe上面存在同名文件会被替换。
5.3通过计划任务客户端定时同步文件
前面通过批处理文件来实现文件同步还是手动操作，后面通过添加计划任务即可实现。我们添加一个叫做rsync_scada的计划任务，然后指定其运行脚本是config_rsync.bat，如下图所示：
在日程安排中设定执行时间，如下图所示，这样设置能够做到每个十分钟就能同步一次config目录。
6.日志查看：
对于文件同步的日志，只能在安装有服务器版cwRsync的机器上面查看。在5.1中提到了服务器端的配置文件，其中有一行是：log file = rsyncd.log。我们在安装目录下就能找到 rsyncd.log这个文件，打开文件我们可以看到所有的记录。下面我摘录部分日志信息
2013/10/10 15:40:38 [2316] connect from BJCGNSCF01 (10.138.16.55) 2013/10/10 15:40:39 [2316] rsync on config/ from bjcgnscf01 (10.138.16.55) 2013/10/10 15:40:39 [2316] building file list 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () config.xml 438246 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () config1.xml 438161 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () process-test.xml 20339 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_AUML.txt 8178 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_BPCG.txt 4453 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_BRBA_SE.txt 4373 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_BRBA_VS.txt 4340 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_DEBT.txt 7114 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_LWZA.txt 4462 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_NMCH.txt 4822 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_NMDS.txt 7531 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_NMFR.txt 7104 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_NMHJ.txt 4956 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_NMSY_VS.txt 4184 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_NMXQ.txt 4340 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_PI.txt 50574 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_SCDA.txt 4960 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_SDSG.txt 7531 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_TPSA.txt 4466 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_TSLW.txt 4791 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_TWSA.txt 4466 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_XKHA.txt 4791 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_XZDA.txt 4952 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_OPC_ZJCA.txt 4462 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () fe_sys/wtg_template_zjc.txt 43642 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () scada_sys/alarm_tab_define.sys 141 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () scada_sys/his_start_month.sys 8 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () scada_sys/pointvalue_10m.sys 255 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () scada_sys/system - 副本.sys 138 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () scada_sys/system.sys_bak 269 2013/10/10 15:40:39 [2316] send bjcgnscf01 [10.138.16.55] config () scada_sys/version.sys 5 2013/10/10 15:40:40 [2316] sent 580665 bytes received 5217 bytes total size 4120913 #cwRsync只同步增量文件，当server端没有新增或者删除文件时，客户端的目录页不会发生变化 2013/10/10 15:50:16 [2252] connect from BJCGNSCF01 (10.138.16.55) 2013/10/10 15:50:17 [2252] rsync on config/ from bjcgnscf01 (10.138.16.55) 2013/10/10 15:50:17 [2252] building file list 2013/10/10 15:50:17 [2252] sent 2420 bytes received 125 bytes total size 4120913
View Code
7.Windows下rsync服务无法启动的解决方法
服务器在意外重启后，RsyncServer服务不能启动，提示“本地计算机上的reyncserver服务启动后又停止了”，方法是将安装目录下的rsyncd.pid文件删除或改名即可，再重新启动RsyncServer服务，OK，成功了，rsyncd.pid文件会自动重新生成。
8.rsync排除目录的使用方法
需求场景：当前希望将一台server上面的一个文件夹同步到5个client上面去，但是又不希望同步所有文件，由个别文件是不需要同步的，所以必须在server的配置文件中添加排除同步的文件，这就需要用到了exclude这个参数。这个可以在client上面使用，也可以直接在server上面的进行配置。下面的例子是在server的rsyncd.conf文件上面配置的。
案例：config文件目录下有test1、test2和test3这三个目录，这三个目录当中都有一个test.txt文件。下面通过不同的配置信息来实现不同的同步要求。
ENVISION——config——test1——test.txt
||———test2——test.txt
||———test3——test.txt
8.1通过exclude关键字实现test1目录的例外
[config] path = /cygdrive/d/ENVISION/config #exclude from = rsync.exclude exclude = test1/ read only = false transfer logging = yes lock file = rsyncd.lock
8.2通过exclude from关键字实现test2和test3目录的例外
[config] path = /cygdrive/d/ENVISION/config exclude from = rsync.exclude #exclude = test1/ read only = false transfer logging = yes lock file = rsyncd.lock
其中rsync.excluede文件跟rsyncd.conf在同一目录下，其中的文件内容是，其中“/”非常重要。
test2/
test3/
8.2排除目录下的指定文件
exclude和exclude from不仅仅指限制与目录，也可以使指定的文件名。
在test1目录下添加一个文件test2.txt，然后进行如下配置
[config] path = /cygdrive/d/ENVISION/config exclude from = rsync.exclude exclude = test1/test.txt read only = false transfer logging = yes lock file = rsyncd.lock
再次执行同步命令，会发现test1/test2.txt会被同步，而test1/test.txt不会被同步。