一、HA部署

本次实验的程序选型为heartbeat v1 + hearesources。资源有IP和httpd,filesystem

配置HA集群的前提:

(1)各节点资源一致,硬件或软件环境一致

(2)各节点时间保持一致,便于心跳传递,使用ntp协议实现

#使用ntpdate命令同步时间,并建立周期性任务
#可使用任意节点服务器作为ntp时间服务器,如各节点可上公网,可直接指定公网ntp服务器 、安装ntp
[root@jymlinux ~]# yum install -y ntp
[root@jymlinux ~]# vim /etc/ntp.conf #修改配置文件允许本网段客户端获取地址
将下面的语句
restrict default kod nomodify notrap nopeer noquery
修改为
restrict default nomodify
restrict 192.168.0.0 mask 255.255.255.0 nomodify [root@jymlinux ~]# service ntpd start
Starting ntpd: [ OK ] 查看同步过程
[root@jymlinux ~]# ntpq -p
remote refid st t when poll reach delay offset jitter
==============================================================================
*202.118.1.81 202.118.1.47 u 92.249 8.602 0.714
202.112.31.197 .INIT. u - 0.000 0.000 0.000 、客户端创建周期任务,每3秒同步时间
[root@centfils ~]# crontab -e
*/ * * * * /usr/sbin/ntpdate 192.168.0.16 &> /dev/null
[root@centfils ~]# service crond start #手动同步成功,因ntp一般为自动,手动前kill掉所有ntp进程即可
[root@centfils ~]# ntpdate 192.168.0.16
Nov :: ntpdate[]: adjust time server 192.168.0.16 offset -0.004440 sec 、时间同步
[root@jymlinux ~]# date; ssh 192.168.0.15 'date'
Mon Nov :: CST
[email protected]'s password:
Mon Nov :: CST

(3)节点间需要通过主机名互相通信,必须解析主机至IP地址

(a)建议名称解析功能使用hosts文件来实现

(b)通信中使用的名字与节点名字必须保持一致 “uname -n” 或hostname展示出的名字保持一致

[root@jymlinux ~]# vim /etc/hosts
192.168.0.15 centfils
192.168.0.16 jymlinux

  (4)关于仲裁设备(共享硬盘或网关),如有偶数个节点,比如2个,应启用仲裁设备,奇数无需启用,大偶数也可以无需仲裁设备

(5)配置各节点之间的root用户能够给予密钥认证

、生成密钥对
[root@centfils ~]# ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
a8:ad:2c::::ff:::9d::::ae:da:c9 root@centfils
The key's randomart image is:
+--[ RSA ]----+
| |
| |
| |
| . = |
| * S |
|.. o o |
|+ . . o o o |
|+ ooo*.. + |
| o +*E+ |
+-----------------+ 、把公钥传输至远程服务器对应用户的家目录
[root@centfils ~]# ssh-copy-id -i .ssh/id_rsa.pub [email protected]
The authenticity of host '192.168.0.16 (192.168.0.16)' can't be established.
RSA key fingerprint is e5::6c:f7:c0::3d:0b::b6:1e::0d::8b:.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.0.16' (RSA) to the list of known hosts.
[email protected]'s password:
Now try logging into the machine, with "ssh '[email protected]'", and check in: .ssh/authorized_keys to make sure we haven't added extra keys that you weren't expecting. 、测试
[root@jymlinux ~]# date; ssh [email protected] 'date'
Mon Nov :: CST
Mon Nov :: CST

密钥认证

(6)定义为集群的资源不能开机自启,而是由crm管理

   配置列表:

    node1:192.168.0.15

  node2:192.168.0.16

    fip:192.168.0.17

二、安装heartbeat

因为heartbeat,红帽和centos官方不提供rpm,因此先下载并安装epel包

[root@centfils ~]# wget http://mirrors.sohu.com/fedora-epel/6/i386/epel-release-6-8.noarch.rpm
[root@centfils ~]# rpm -ivh epel-release--.noarch.rpm
[root@centfils heartbeat2]# yum install heartbeat-2.1.-.el6.i686.rpm heartbeat-pils-2.1.-.el6.i686.rpm heartbeat-stonith-2.1.-.el6.i686.rpm #安装依赖包,安装在主程序包前
[root@jymlinux ~]# yum install perl-TimeDate net-snmp-libs libnet PyXML
[root@jymlinux ~]# yum install libpils*

heartbeat的配置文件在/etc/ha.d目录下,其主要配置文件为ha.cf,定义各节点上的heartbeat HA集群的基本属性。authkeys配置文件,为集群内节点间彼此传递消息时使用的加密算法及密钥。

haresources,为heartbeat v1提供的资源管理器配置接口,v1版专用。

#将配置文件模板复制到/etc/ha.d目录下
[root@centfils ha.d]# cp /usr/share/doc/heartbeat-3.0./{ha.cf,haresources,authkeys} /etc/ha.d/ #节点间认证配置文件权限必须为600
[root@centfils ha.d]# chmod authkeys

三、配置heartbeat

、配置authkeys文件,指明启用何种算法,使用何种密钥,本文件须更改权限为400
auth
# crc
sha1 dPCDBSAie31fz6d5MhM0/A
# md5 Hello! 生成随机字符串作为密钥
[root@centfils ha.d]# openssl rand -base64
dPCDBSAie31fz6d5MhM0/A== 、配置ha.cf文件,定义高可用集群的基本工作方式 定义日志文件位置(二选一) logfacility为将日志交由syslog管理
logfile /var/log/ha-log
#logfacility local0
多长时间发送一次心跳信息,默认为2秒
#keepalive
多长时间宣布某节点死亡,默认30秒
#deadtime
多长时间警告对方心跳信息延迟了,默认10秒
#warntime
第一次死去时间,避免因网络问题导致宣布死亡
#initdead
使用udp694端口传递心跳,并选择哪种方式传递心跳
#udpport
串行线缆传递心跳
#serial /dev/ttyS0 # Linux
#serial /dev/cuaa0 # FreeBSD
#serial /dev/cuad0 # FreeBSD .x
#serial /dev/cua/a # Solaris
串行线缆的工作频率
#baud
广播传递心跳
#bcast eth0 # Linux
#bcast eth1 eth2 # Linux
#bcast le0 # Solaris
#bcast le1 le2 # Solaris
多播传递心跳,网卡必须支持多播,ifconfig | grep MULTICAST
mcast eth0 225.0.0.1 #端口694,TTL为1,不允许回传为0
#启用网卡支持多播
[root@jymlinux ~]# ip link set eth0 multicast on 单薄传递心跳
#ucast eth0 192.168.1.2
自动故障转回
auto_failback on
指明节点
#node ken3
#node kathy
node centfils
node jymlinux
指明网关为ping node设备(仲裁设备)
#ping 10.10.10.254
ping 192.168.0.1
指明一个组为ping node设备(仲裁设备)
#ping_group group1 10.10.10.254 10.10.10.253
指明节点间传送的压缩算法
compression bz2
指明节点间传送数据压缩的最小数据为2KB
compression_threshold
、配置haresources文件,定义集群资源
直接加入资源
centfils 192.168.0.17//eth0/192.168.0.255 httpd 、将httpd设置为开机不启动
[root@centfils ~]# chkconfig httpd off 、启动服务
[root@centfils ~]# service heartbeat start

五、HA web services中加入共享文件资源

  filesystem为192.168.0.20,一般情况下HA-web services使用的filesystem为raid或分布式文件系统,实验以nfs演示

、在filesystem上建立共享文件系统
[root@linus ~]# clear
[root@linus ~]# mkdir /web/htdocs -pv
mkdir: created directory `/web'
mkdir: created directory `/web/htdocs'
[root@linus ~]# vim /web/htdocs/index.html 、将此目录通过nfs共享
[root@linus ~]# yum install portmap*
#nfs-utils-* :包括基本的NFS命令与监控程序 [root@linus ~]# yum install nfs*
#portmap-* :支持安全NFS RPC服务的连接 [root@linus ~]# vim /etc/exports
/web/htdocs 192.168.0.0/(rw,no_root_squash)
#NFS服务的配置文件为 /etc/exports,这个文件是NFS的主要配置文件,不过系统并没有默认值,所以这个文件不一定会存在,可能要使用vim手动建立,然后在文件里面写入配置内容。 #在此处出现错误,nfs无法启动,提示为rpc无法连接,所以重启rpc后启动nfs
[root@linus ~]# /etc/init.d/rpcbind restart
Stopping rpcbind: [FAILED]
Starting rpcbind: [ OK ]
[root@linus ~]# service nfslock start
Starting NFS statd: [ OK ]
[root@linus ~]# service nfs start
Starting NFS services: [ OK ]
Starting NFS quotas: [ OK ]
Starting NFS mountd: [ OK ]
Starting NFS daemon: [ OK ]
Starting RPC idmapd: [ OK ] #将nfs加入开机自启
[root@linus ~]# chkconfig nfs on #将nfs挂载进行测试,
[root@centfils ~]# mount -t nfs 192.168.0.20:/web/htdocs /var/www/html
[root@centfils ~]# umount /var/www/html
[root@jymlinux ha.d]# vim haresources
centfils 192.168.0.17//eth0/192.168.0.255 Filesystem::192.168.0.20:/web/htdocs::/var/www/html::nfs httpd
[root@jymlinux ha.d]# scp haresources centfils:/etc/ha.d/
haresources % .9KB/s : [root@jymlinux ha.d]# service heartbeat start; ssh centfils 'service heartbeat start'
05-22 13:42