一、试验拓扑：

二、配置File Server

 
    
     
         
  1. # pvcreate /dev/sda5  
    2.  
         
  2. # vgcreate vg01 /dev/sda5  
    3.  
         
  3. # lvcreate -n mydata -L 10G vg01  
    4.  
         
  4. # mke2fs -j /dev/vg01/mydata  
    5.  
         
  5.  
    6.  
         
  6. # cat /etc/fstab  
    7.  
         
  7. /dev/vg01/mydata /share   ext3 defaults 0 0  
    8.  
         
  8. # mkdir /share  
    9.  
         
  9. # mount -a  
    10.  
         
  10.  
    11.  
         
  11. （这里要注意的是node1,node2,File Server三台的mysql用户UID要一样）  
    12.  
         
  12. # useradd -r -u 200 mysql  
    13.  
         
  13. # chown -R mysql.mysql /share/  
    14.  
         
  14.  
    15.  
         
  15. # vim /etc/exports   
    16.  
         
  16. /share  172.16.15.20(rw,no_root_squash) 172.16.15.30(rw,no_root_squash)  
    17.  
         
  17. # service nfs restart  
    18.  
         
  18. # chkconfig nfs on 
    19.  
        
 
    
三、配置RS1和RS2
 
    
1、基本配置
 
    
 
    
     
         
  1. # vim /etc/sysconfig/network  
    2.  
         
  2. HOSTNAME=rs1.peace.com  
    3.  
         
  3.  
    4.  
         
  4. # vim /etc/hosts  
    5.  
         
  5. 192.168.80.145  rs1.peace.com rs1  
    6.  
         
  6. 192.168.80.146  rs2.peace.com rs2  
    7.  
         
  7.  
    8.  
         
  8. # ssh-keygen -t rsa  
    9.  
         
  9. # ssh-copy-id -i .ssh/id_rsa.pub  root@rs2 
    10.  
        
 
    
2、配置LNMP
 
    
环境需求：
 
    
# yum -y install pcre-devel 
 # yum -y groupinstall "Development Tools" 
 # yum -y groupinstall "Development Libraries" 
 # yum -y groupinstall "X Software Development"
 
    
1）配置Nginx
 
    
 
    
     
         
  1. # groupadd -r nginx  
    2.  
         
  2. # useradd -r -g nginx -s /sbin/nologin -M nginx  
    3.  
         
  3. # tar xf nginx-1.2.2.tar.gz   
    4.  
         
  4. #　cd  nginx-1.2.2  
    5.  
         
  5.  
    6.  
         
  6. # ./configure --prefix=/usr   --sbin-path=/usr/sbin/nginx   --conf-path=/etc/nginx/nginx.conf   --error-log-path=/var/log/nginx/error.log   --http-log-path=/var/log/nginx/access.log   --pid-path=/var/run/nginx/nginx.pid    --lock-path=/var/lock/nginx.lock   --user=nginx   --group=nginx   --with-http_ssl_module   --with-http_flv_module   --with-http_stub_status_module   --with-http_gzip_static_module   --http-client-body-temp-path=/var/tmp/nginx/client/   --http-proxy-temp-path=/var/tmp/nginx/proxy/   --http-fastcgi-temp-path=/var/tmp/nginx/fcgi/   --http-uwsgi-temp-path=/var/tmp/nginx/uwsgi   --http-scgi-temp-path=/var/tmp/nginx/scgi   --with-pcre   
    7.  
         
  7.  
    8.  
         
  8. # make && make install   
    9.  
         
  9. # cd /root  
    10.  
         
  10.  
    11.  
         
  11. # cp nginx /etc/rc.d/init.d/nginx   
    12.  
         
  12. # chmod +x /etc/rc.d/init.d/nginx  
    13.  
         
  13. # service nginx start   
    14.  
         
  14.  
    15.  
        
 
    
 
 
    
2)配置Mysql
 
    
 
    
     
         
  1. # useradd -r -u 200 mysql  
    2.  
         
  2. # mkdir /data/mydata -p  
    3.  
         
  3. # mount -t nfs 192.168.80.142:/share /data/mydata/   
    4.  
         
  4.  
    5.  
         
  5. # tar -xf mysql-5.5.24-linux2.6-i686.tar.gz  -C /usr/local/   
    6.  
         
  6. # cd /usr/local/  
    7.  
         
  7. # ln -s mysql-5.5.24-linux2.6-i686/ mysql   
    8.  
         
  8. # cd mysql  
    9.  
         
  9.  
    10.  
         
  10. (注意：这里的RS1是第一次初始化Mysql所以使用以下2条命令，而RS2只需执行“chown -R root.mysql ."即可，不用再重新初始化)  
    11.  
         
  11. # chown -R mysql.mysql .  
    12.  
         
  12. # scripts/mysql_install_db --user=mysql --datadir=/data/mydata/  
    13.  
         
  13.  
    14.  
         
  14. # cp support-files/my-large.cnf /etc/my.cnf  
    15.  
         
  15. # sed -i 's/^\(thread_concurrency\).*/\1 = 2/' /etc/my.cnf  
    16.  
         
  16. # sed -i '/^thread_concurrency.*/a\datadir = /data/mydata/' /etc/my.cnf  
    17.  
         
  17.  
    18.  
         
  18. # cp support-files/mysql.server /etc/rc.d/init.d/mysqld  
    19.  
         
  19. # chmod +x /etc/rc.d/init.d/mysqld  
    20.  
         
  20. # cd /root  
    21.  
         
  21.  
    22.  
         
  22. # echo '/usr/local/mysql/lib/' >> /etc/ld.so.conf  
    23.  
         
  23. # ldconfig   
    24.  
         
  24. # service mysqld start  
    25.  
        
 
    
3)配置php
 
    
 
    
     
         
  1. 升级安装如下软件包：  
    2.  
         
  2. libmcrypt-2.5.7-5.el5.i386.rpm  
    3.  
         
  3. libmcrypt-devel-2.5.7-5.el5.i386.rpm  
    4.  
         
  4. mhash-0.9.2-6.el5.i386.rpm  
    5.  
         
  5. mhash-devel-0.9.2-6.el5.i386.rpm  
    6.  
         
  6.  
    7.  
         
  7. # cd php_rpm  
    8.  
         
  8. # rpm -Uvh libmcrypt-* mhash-* && cd /root  
    9.  
         
  9.  
    10.  
         
  10. # tar xf php-5.4.4.tar.bz2   
    11.  
         
  11. # cd php-5.4.4  
    12.  
         
  12. # ./configure --prefix=/usr/local/php --with-mysql=/usr/local/mysql --with-openssl --enable-fpm --enable-sockets --enable-sysvshm  --with-mysqli=/usr/local/mysql/bin/mysql_config --enable-mbstring  --enable-sockets --with-freetype-dir --with-jpeg-dir --with-png-dir --with-zlib-dir --with-libxml-dir=/usr --enable-xml  --with-mhash --with-mcrypt  --with-config-file-path=/etc/php --with-config-file-scan-dir=/etc/php --with-bz2 --with-curl   
    13.  
         
  13.  
    14.  
         
  14. # make && make install  
    15.  
         
  15.  
    16.  
         
  16. # cp php.ini-production /etc/php.ini  
    17.  
         
  17. # cp sapi/fpm/init.d.php-fpm /etc/rc.d/init.d/php-fpm  
    18.  
         
  18. # chmod +x /etc/rc.d/init.d/php-fpm   
    19.  
         
  19.  
    20.  
         
  20. # cp /usr/local/php/etc/php-fpm.conf.default /usr/local/php/etc/php-fpm.conf  
    21.  
         
  21. # sed -i 's/^;\(pid.*\)/\1/' /usr/local/php/etc/php-fpm.conf  
    22.  
         
  22. # sed -i 's/^\(pm.max_children\).*/\1 = 50/' /usr/local/php/etc/php-fpm.conf  
    23.  
         
  23. # sed -i 's/^\(pm.start_servers\).*/\1 = 5/' /usr/local/php/etc/php-fpm.conf  
    24.  
         
  24. # sed -i 's/^\(pm.min_spare_servers\).*/\1 = 2/' /usr/local/php/etc/php-fpm.conf  
    25.  
         
  25. # sed -i 's/^\(pm.max_spare_servers\).*/\1 = 8/' /usr/local/php/etc/php-fpm.conf  
    26.  
         
  26.  
    27.  
         
  27. # cd /root  
    28.  
         
  28. # service php-fpm start 
    29.  
        
 
    
4）整合nginx，php
 
    
 
    
     
         
  1. # echo "fastcgi_param  SCRIPT_FILENAME    \$document_root\$fastcgi_script_name;"  >> /etc/nginx/fastcgi_params  
    2.  
         
  2.  
    3.  
         
  3.  
    4.  
         
  4. 去掉nginx.conf中的如下行的#号，使用sed即可  
    5.  
         
  5.         location ~ \.php$ {  
    6.  
         
  6.             root           html;  
    7.  
         
  7.             fastcgi_pass   127.0.0.1:9000;  
    8.  
         
  8.             fastcgi_index  index.php;  
    9.  
         
  9.             fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;  
    10.  
         
  10.             include        fastcgi_params;  
    11.  
         
  11.         }  
    12.  
         
  12. # sed -i '65,71s/#//' /etc/nginx/nginx.conf  
    13.  
         
  13.  
    14.  
         
  14. 添加支持index.php页面  
    15.  
         
  15. location / {  
    16.  
         
  16.             root   html;  
    17.  
         
  17.             index  index.php index.html index.htm;  
    18.  
         
  18.         }  
    19.  
         
  19. # sed -i '45s/\<\(index.html\)\>/index.php \1/' /etc/nginx/nginx.conf  
    20.  
         
  20.  
    21.  
         
  21. # service nginx restar 
    22.  
        
 
    
5）测试访问下RS1和RS2
分别在两台添加测试页面
  
 
    
 
    
     
         
  1. # vim /usr/html/index.php  
    2.  
         
  2. <?php 
    3.  
         
  3. $link=mysql_connect('localhost','root','');  
    4.  
         
  4. if ($link)  
    5.  
         
  5.         echo "RS1 Sucess!!";  
    6.  
         
  6. else  
    7.  
         
  7.         echo "RS1 Failuser!!";  
    8.  
         
  8. mysql_close();  
    9.  
         
  9. ?> 
    10.  
        
 
    
访问结果如下：
 
    
  
 
    
 之后一定要关闭所有的服务,并且卸载数据目录
 # service nginx stop
 # service mysqld stop
 # service php-fpm stop
 # umount /data/mydata
 
    
四、配置corosync
 
    
1、安装如下软件包：
 
    
 
    
     
         
  1. cluster-glue-1.0.6-1.6.el5.i386.rpm  
    2.  
         
  2. cluster-glue-libs-1.0.6-1.6.el5.i386.rpm  
    3.  
         
  3. corosync-1.2.7-1.1.el5.i386.rpm  
    4.  
         
  4. corosynclib-1.2.7-1.1.el5.i386.rpm  
    5.  
         
  5. heartbeat-3.0.3-2.3.el5.i386.rpm  
    6.  
         
  6. heartbeat-libs-3.0.3-2.3.el5.i386.rpm  
    7.  
         
  7. libesmtp-1.0.4-5.el5.i386.rpm  
    8.  
         
  8. pacemaker-1.1.5-1.1.el5.i386.rpm  
    9.  
         
  9. pacemaker-cts-1.1.5-1.1.el5.i386.rpm  
    10.  
         
  10. pacemaker-libs-1.1.5-1.1.el5.i386.rpm  
    11.  
         
  11. resource-agents-1.0.4-1.1.el5.i386.rpm  
    12.  
         
  12.  
    13.  
         
  13. # yum -y --nogpgcheck localinstall *.rpm  
    14.  
         
  14. # cd /etc/corosync/  
    15.  
         
  15. # cp corosync.conf.example corosync.conf 
    16.  
        
 
    
2、修改配置文件，具体详细信息可以参考之前文章
 
    
 
    
     
         
  1. # vim corosync.conf  
    2.  
         
  2. compatibility: whitetank      
    3.  
         
  3.  
    4.  
         
  4. totem {         
    5.  
         
  5.         version: 2       
    6.  
         
  6.         secauth: on        
    7.  
         
  7.         threads: 0       
    8.  
         
  8.         interface {       
    9.  
         
  9.                 ringnumber: 0    
    10.  
         
  10.                 bindnetaddr: 192.168.80.0     
    11.  
         
  11.                 mcastaddr: 226.94.1.1     
    12.  
         
  12.                 mcastport: 5405      
    13.  
         
  13.         }  
    14.  
         
  14. }  
    15.  
         
  15.  
    16.  
         
  16. logging {        
    17.  
         
  17.         fileline: off  
    18.  
         
  18.         to_stderr: no       
    19.  
         
  19.         to_logfile: yes       
    20.  
         
  20.         to_syslog: no       
    21.  
         
  21.         logfile: /var/log/corosync.log     
    22.  
         
  22.         debug: off       
    23.  
         
  23.         timestamp: on       
    24.  
         
  24.         logger_subsys {  
    25.  
         
  25.                 subsys: AMF  
    26.  
         
  26.                 debug: off  
    27.  
         
  27.         }  
    28.  
         
  28. }  
    29.  
         
  29.  
    30.  
         
  30. amf {      
    31.  
         
  31.         mode: disabled  
    32.  
         
  32. }  
    33.  
         
  33. (添加以下信息)  
    34.  
         
  34. service {  
    35.  
         
  35.         ver: 0  
    36.  
         
  36.         name: pacemaker    
    37.  
         
  37. }  
    38.  
         
  38.  
    39.  
         
  39. aisexec {     
    40.  
         
  40.         user:   root  
    41.  
         
  41.         group:  root  
    42.  
         
  42. } 
    43.  
        
 
    
3、其他配置
 
    
 
    
     
         
  1. # corosync-keygen   //生成authkey密钥  
    2.  
         
  2. # scp -p authkey corosync.conf node2:/etc/corosync/  
    3.  
         
  3. # service corosync start  
    4.  
         
  4. # ssh rs2 '/etc/rc.d/init.d/corosync start' 
    5.  
        
 
    
4、建立资源
 
    
 
    
     
         
  1. crm(live)configure# primitive mysql_vip ocf:heartbeat:IPaddr params ip=192.168.80.100  
    2.  
         
  2. crm(live)configure# primitive mynfs ocf:heartbeat:Filesystem params device="192.168.80.142:/share" directory="/data/mydata" fstype="nfs" op start timeout=60s op stop timeout=60s 
    3.  
         
  3. crm(live)configure# primitive mysql lsb:mysqld   
    4.  
         
  4. crm(live)configure# primitive php-fpm lsb:php-fpm   
    5.  
         
  5. crm(live)configure# primitive nginx lsb:nginx  
    6.  
         
  6. crm(live)configure# colocation lnmp inf: nginx php-fpm mysql_vip mynfs mysql  
    7.  
         
  7. crm(live)configure# order mysql_after_mynfs mandatory: mynfs mysql  
    8.  
         
  8. crm(live)configure# property stonith-enabled=false 
    9.  
         
  9. crm(live)configure# commit  
    10.  
         
  10. crm(live)configure# quit 
    11.  
        
 
    
五、测试验证
通过crm status 查看状态信息，发现已经在RS1上了，并且有相应的进程:
 
    
 
    
访问下看看：
 
    
 
    
 下面模拟RS1挂掉，看是否正常，在rs1上执行crm node standby即可，也已看到已经切换到RS2上了：
 
    
 
    
 访问下，已经切换到RS2上了：
 
    
 
    
 并且RS2进程也已经启动了：
 
    
 
    
 至此试验已经成功了，不过这里莫怪小弟愚钝，没法解决单个服务挂了也进行切换，想只能脚本监控了。