NginxPHPMySQL双机互备全自动切换专项方案.docx

Nginx+PHP+MySQL双机互备、全自动切换方案在生产应用中，某台“Nginx+PHP+MySQL”接口数据服务器，饰演角色十分关键，假如服务器硬件或Nginx、MySQL发生故障，而短时间内无法恢复，后果将很严重。为了避免单点故障，我设计了此套方案，编写了failover.sh脚本，实现了双机互备、全自动切换，故障转移时间只需几十秒。一、双机互备、全自动切换方案： 1、拓扑图： 2、解释： (1)、假设外网域名解析到外网虚拟IP 72.249.146.214上，内网hosts设置db10对应内网虚拟IP 192.168.146.214(2)、默认情况下，由主机绑定内、外网虚拟IP，备机作为备份，当主机MySQL、Nginx或服务器出现故障无法访问时，备机会自动接管内、外网虚拟IP。两台服务器全部开启负责监控、自动切换虚拟IP守护进程/usr/bin/nohup /bin/sh /usr/local/webserver/failover/failover.sh 2&1 /dev/null &(3)、主机和备机上MySQL服务器互为主从，相互同时。在主机处于活动状态（即由主机绑定虚拟IP）时，读写主机 MySQL，写到主机数据会同时到备机；在备机处于活动状态时，读写备机MySQL，写到备机数据会同时到主机（假如主机上MySQL死掉临时无法同时，主机上MySQL恢复后，数据会自动从备机上同时过来，反之亦然）。(4)、主机处于活动状态时，每20秒会把 /data0/htdocs/（网页、程序、图片存放目录）、/usr/local/webserver/php/etc/（php.ini等配置文件目录）、/usr/local/webserver/nginx/conf/（Nginx配置文件目录）三个目录下文件经过rsync推送到备机服务器上对应目录（增量推送，两台服务器上一样文件不会反复推送），反之假如备机处于活动状态时，每20秒会尝试把文件推送到主机。rsync配置文件见两台服务器/etc/rsyncd.conf，rsync守护进程开启命令为rsync -daemon3、自动切换步骤 (1)、主机默认绑定内、外网虚拟IP，当主机MySQL、Nginx无法访问或服务器宕机，主机上failover.sh守护进程会自动摘除自己绑定内、外网虚拟IP（假如主机上failover.sh死掉，无法摘除自己绑定虚拟IP也没关系），备机上failover.sh守护进程会自动接管备机原来绑定内、外网虚拟IP，并发送ARPing包给内、外网网关更新MAC，强行接管。(2)、备机绑定虚拟IP后，会发送ARPing包给内、外网网关，通知网关更新虚拟IPMAC地址为备机MAC地址，从而确保了切换后能够经过虚拟IP立即访问到备机。(3)、假如主机MySQL、Nginx开启起来，全部恢复正常访问，主机上failover.sh守护进程会检测主机上MySQL数据是否已经完全从备机上同时过来。假如同时延迟时间为0，主机会自动接管内、外网虚拟IP，并发送ARPing包给内、外网网关，而备机也会自动摘除内、外网虚拟 IP。(4)、整个切换步骤均由failover.sh自动完成，无需人工处理。 4、注意事项（很关键）： (1)、crontab里文件没有做自动同时，假如修改，需要手工在两台服务器上全部做修改。(2)、/data0/htdocs/目录内任何用ln -s建立软连接，rsync不会自动同时，假如在一台服务器上建了软连接，需要手工在另外一台服务器上也建相同软连接。(3)、假如要删除/data0/htdocs/目录内一些文件或目录，需要先删除处于活动状态（即绑定了虚拟IP）服务器上文件或目录，再删除处于备用状态服务器上文件或目录。(4)、除了/data0/htdocs/（网页、程序、图片存放目录）、/usr/local/webserver/php/etc /（php.ini等配置文件目录）、/usr/local/webserver/nginx/conf/（Nginx配置文件目录）三个目录之外其它配置修改，需要在两台服务器上全部做修改。-二、配置文档和脚本： 1、主机、备机两台服务器rsync配置（配置相同） (1)、rsync配置文件vi /etc/rsyncd.conf输入部分内容并保留：引用uid = rootgid = rootuse chroot = nomax connections = 20pid file = /var/run/rsyncd.pidlock file = /var/run/rsync.locklog file = /var/log/rsyncd.logdata0_htdocspath = /data0/htdocs/ignore errorsread only = nohosts allow = 192.168.146.0/24hosts deny = 0.0.0.0/32php_etcpath = /usr/local/webserver/php/etc/ignore errorsread only = nohosts allow = 192.168.146.0/24hosts deny = 0.0.0.0/32nginx_confpath = /usr/local/webserver/nginx/conf/ignore errorsread only = nohosts allow = 192.168.146.0/24hosts deny = 0.0.0.0/32(2)、开启rsync守护进程/usr/bin/rsync -daemon2、两台MySQL互为主从配置 这里就不具体写出互为主从配置过程了，假如不懂好友能够在谷歌上搜一下。有一点需要指出，f配置文件中请加上skip-name-resolve参数，使用IP来进行MySQL帐号验证。3、主机、备机两台服务器负载监控、虚拟IP自动切换failover.sh守护进程 (1)、开启failover.sh守护进程（为了开机能够自动运行，请将以下语句添加到/etc/rc.local文件中）：/usr/bin/nohup /bin/sh /usr/local/webserver/failover/failover.sh 2&1 /dev/null &(2)、停止failover.sh守护进程：ps -ef | grep failover.sh会显示以下信息：root 15428 1 0 Nov17 ? 00:00:03 /bin/sh /usr/local/webserver/failover/failover.shroot 3 6878 0 16:16 pts/2 00:00:00 grep failover.sh 然后杀死failover.sh进程：kill -9 15428(3)、failover.sh代码内容（请注意其中type设置，主机设为master，备机设为slave ）：#!/bin/shLANG=Cdate=$(date -d today +%Y-%m-%d %H:%M:%S)#-配置信息(开始)-#类型：主机设为master，备机设为slavetype=master#主机、备机切换日志路径logfile=/var/log/failover.log#MySQL可实施文件地址，比如/usr/local/mysql/bin/mysql；MySQL用户名；密码；端口mysql_bin=/usr/local/webserver/mysql/bin/mysqlmysql_username=rootmysql_password=123456mysql_port=3306#内网网关gateway_eth0=192.168.146.1#主机内网真实IPrip_eth0_master=192.168.146.213#备机内网真实IPrip_eth0_slave=192.168.146.215#主机、备机内网共用虚拟IPvip_eth0_share=192.168.113.214#外网网关gateway_eth1=72.249.146.193#主机外网真实IPrip_eth1_master=72.249.146.213#备机外网真实IPrip_eth1_slave=72.249.146.215#主机、备机外网共用虚拟IPvip_eth1_share=72.249.146.214#-配置信息(结束)-#绑定内、外网虚拟IPfunction_bind_vip() /sbin/ifconfig eth0:vip $vip_eth0_share broadcast $vip_eth0_share netmask 255.255.255.255 up /sbin/route add -host $vip_eth0_share dev eth0:vip /sbin/ifconfig eth1:vip $vip_eth1_share broadcast $vip_eth1_share netmask 255.255.255.255 up /sbin/route add -host $vip_eth1_share dev eth1:vip /usr/local/webserver/php/sbin/php-fpm reload kill -USR1 cat /usr/local/webserver/nginx/logs/nginx.pid /sbin/service crond start#解除内、外网虚拟IPfunction_remove_vip() /sbin/ifconfig eth0:vip $vip_eth0_share broadcast $vip_eth0_share netmask 255.255.255.255 down /sbin/ifconfig eth1:vip $vip_eth1_share broadcast $vip_eth1_share netmask 255.255.255.255 down /sbin/service crond stop#主机向备机推送文件函数function_rsync_master_to_slave() /usr/bin/rsync -zrtuog /data0/htdocs/ $rip_eth0_slave:data0_htdocs/ /dev/null 2&1 /usr/bin/rsync -zrtuog /usr/local/webserver/php/etc/ $rip_eth0_slave:php_etc/ /dev/null 2&1 /usr/bin/rsync -zrtuog /usr/local/webserver/nginx/conf/ $rip_eth0_slave:nginx_conf/ /dev/null 2&1#备机向主机推送文件函数function_rsync_slave_to_master() /usr/bin/rsync -zrtuog /data0/htdocs/ $rip_eth0_master:data0_htdocs/ /dev/null 2&1 /usr/bin/rsync -zrtuog /usr/local/webserver/php/etc/ $rip_eth0_master:php_etc/ /dev/null 2&1 /usr/bin/rsync -zrtuog /usr/local/webserver/nginx/conf/ $rip_eth0_master:nginx_conf/ /dev/null 2&1#虚拟IP ARPingfunction_vip_arping() /sbin/arping -I eth0 -c 3 -s $vip_eth0_share $gateway_eth0 /dev/null 2&1 /sbin/arping -I eth1 -c 3 -s $vip_eth1_share $gateway_eth1 /dev/null 2&1 while truedo #用HTTP协议检验虚拟IP if (curl -m 30 -G http:/$vip_eth1_share/ /dev/null 2&1) & ($mysql_bin -u$mysql_username -p$mysql_password -P$mysql_port -h$vip_eth0_share -eshow slave statusG /dev/null 2&1) then #取得和内网VIP绑定服务器内网IP eth0_active_server=$($mysql_bin -u$mysql_username -p$mysql_password -P$mysql_port -h$vip_eth0_share -eshow slave statusG | grep Master_Host | awk -F : printf $2) #假如内网VIP=主机内网IP（主机MySQL中Master_Host显示是备机域名或IP），且本机为主机 if $eth0_active_server = $rip_eth0_slave & $type = master then function_rsync_master_to_slave function_vip_arping #假如内网VIP=备机内网IP（备机MySQL中Master_Host显示是主机域名或IP） elif $eth0_active_server = $rip_eth0_master then if (curl -m 30 -G http:/$rip_eth1_master/ /dev/null 2&1) & ($mysql_bin -u$mysql_username -p$mysql_password -P$mysql_port -h$rip_eth0_master -eshow slave statusG | grep Seconds_Behind_Master: 0 /dev/null 2&1) then #假如主机能够访问，数据库同时无延迟，且本机就是主机，那么由本机绑定虚拟IP if $type = master then #假如本机为主机 function_bind_vip function_vip_arping echo $date 主机已绑定虚拟IP!(Type:1) $logfile else #假如本机为备机 function_remove_vip echo $date 备机已去除虚拟IP!(Type:2) $logfile fi else if $type = slave then #假如本机为备机 function_rsync_slave_to_master function_vip_arping fi fi fi else #虚拟IP无法访问时，判定主机能否访问 if (curl -m 30 -G http:/$rip_eth1_master/ /dev/null 2&1) & ($mysql_bin -u$mysql_username -p$mysql_password -P$mysql_port -h$rip_eth0_master -eshow slave statusG /dev/null 2&1) then #假如主机能够访问，且本机就是主机，那么由本机绑定虚拟IP if $type = master then function_bind_vip function_vip_arping echo $date 主机已绑定虚拟IP!(Type:3) $logfile else function_remove_vip echo $date 备机已去除虚拟IP!(Type:4) $logfile fi elif (curl -m 30 -G http:/$rip_eth1_slave/ /dev/null 2&1) & ($mysql_bin -u$mysql_username -p$mysql_password -P$mysql_port -h$rip_eth0_slave -eshow slave statusG /dev/null 2&1) then #假如主机不能访问而备机能够访问，且本机就是备机，那么由备机绑定虚拟IP if $type = slave then function_bind_vip function_vip_arping echo $date 备机已绑定虚拟IP!(Type:5) $logfile else function_remove_vip echo $date 主机已去除虚拟IP!(Type:6) $logfile fi else echo $date 主机、备机全部无法访问!(Type:7) $logfile fi fi #每次循环暂停20秒(即间隔20秒检测一次) sleep 20done