1、DRBD安装
1.1、安装依赖包:
[java] view plaincopy
- yum -y install gcc kernel-devel kernel-headers flex
下载安装drbd源码包:
[java] view plaincopy
- wget http://oss.linbit.com/drbd/8.4/drbd-8.4.1.tar.gz
- tar xzf drbd-8.4.1.tar.gz
- cd drbd-8.4.1
- ./configure --prefix=/usr/local/drbd --with-km
- make KDIR=/usr/src/kernels/2.6.32-220.17.1.el6.x86_64/
- make install
- mkdir -p /usr/local/drbd/var/run/drbd
- cp /usr/local/drbd/etc/rc.d/init.d/drbd /etc/rc.d/init.d
- chkconfig --add drbd
- chkconfig drbd on
KDIR=中指定的系统内核源码路径,根据实际情况设置
1.2、安装drbd模块:
[java] view plaincopy
- cd drbd
- make clean
- make KDIR=/usr/src/kernels/2.6.32-220.17.1.el6.x86_64/
- cp drbd.ko /lib/modules/`uname -r`/kernel/lib/
- depmod
2、DRBD配置
首先对/dev/sda设备分区/dev/sda3(这一步我是在装系统时就分区了),在根目录下建立/drbdData文件夹,名字自定义,供后面挂载/dev/sda3分区设备用。
2.1、配置global_common.conf
编辑全局配置:
[java] view plaincopy
- vi /usr/local/drbd/etc/drbd.d/global_common.conf
确保文件中包含有下内容:
[java] view plaincopy
- global {
- usage-count yes;
- }
- common {
- net {
- protocol C;
- }
- }
当然,还可以有其它配置,这是最基本的。
2.2、配置r0资源:
创建r0资源:
[java] view plaincopy
- vi /usr/local/drbd/etc/drbd.d/r0.res
写入文件内容:
[java] view plaincopy
- resource r0{
- on masterNode{
- device /dev/drbd1; #逻辑设备的路径
- disk /dev/sda3; #物理设备
- address 192.168.58.128:7788;
- meta-disk internal;
- }
- on backupNode{
- device /dev/drbd1;
- disk /dev/sda3;
- address 192.168.58.129:7788;
- meta-disk internal;
- }
- }
需要把上面用到的防火墙7788端口打开,这个端口是自定义的,如果嫌麻烦可以直接关掉防火墙。
说明:
device 是自定义的物理设备的逻辑路径
disk 是磁盘设备,或者是逻辑分区
address 是机器监听地址和端口
meta-disk 这个还没弄明白,看到的资料都是设为:internal
2.3、建立resource
[java] view plaincopy
- modprobe drbd //载入 drbd 模块
- lsmod | grep drbd //确认 drbd 模块是否载入
- dd if=/dev/zero of=/dev/sda3 bs=1M count=100 //把一些资料塞到 sda3 內 (否则 create-md 时会报错)
- drbdadm create-md r0 //建立 drbd resource
- drbdadm up r0
我遇到的问题:
[java] view plaincopy
- [root@backupNode /]# drbdadm up r0
- 1: Failure: (104) Can not open backing device.
- Command 'drbdsetup attach 1 /dev/sda3 /dev/sda3 internal' terminated with exit code
原因是我之前已经挂在了/dev/sda3,需要先卸载/dev/sda3设备,解决办法:
[java] view plaincopy
- umount /dev/sda3
问题解决。
注:以上每一步骤,都需要在主备服务器上进行配置设置。
2.4、设置Primary Node
将masterNode设为主服务器(primary node),在masterNode上执行:
[java] view plaincopy
- drbdadm primary --force r0
查看drbd状态:
[java] view plaincopy
- [root@backupNode /]# cat /proc/drbd
- version: 8.4.1 (api:1/proto:86-100)
- GIT-hash: 91b4c048c1a0e06777b5f65d312b38d47abaea80 build by root@masterNode, 2012-05-27 18:34:27
- 1: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-----
- ns:4 nr:9504584 dw:9504588 dr:1017 al:1 bm:576 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
已经变成了主服务器。
2.5、创建DRBD文件系统
上面已经完成了/dev/drbd1的初始化,现在来把/dev/drbd1格式化成ext4格式的文件系统,在masterNode上执行:
[java] view plaincopy
- [root@masterNode /]# mkfs.ext4 /dev/drbd1
输出:
[java] view plaincopy
- mke2fs 1.41.12 (17-May-2010)
- 文件系统标签=
- 操作系统:Linux
- 块大小=4096 (log=2)
- 分块大小=4096 (log=2)
- Stride=0 blocks, Stripe width=0 blocks
- 589824 inodes, 2358959 blocks
- 117947 blocks (5.00%) reserved for the super user
- 第一个数据块=0
- Maximum filesystem blocks=2415919104
- 72 block groups
- 32768 blocks per group, 32768 fragments per group
- 8192 inodes per group
- Superblock backups stored on blocks:
- 32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632
- 正在写入inode表: 完成
- Creating journal (32768 blocks): 完成
- Writing superblocks and filesystem accounting information: 完成
- This filesystem will be automatically checked every 21 mounts or
- 180 days, whichever comes first. Use tune2fs -c or -i to override.
然后,将/dev/drbd1挂载到之前创建好的/drbdData目录:
[java] view plaincopy
- [root@masterNode /]# mount /dev/drbd1 /drbdData
现在只要把数据写入/drbdData目录,drbd即会立刻把数据同步到backupNode的/dev/sda3分区上了。
2.6、DRBD同步测试
1、首先,在主服务器上先将设备卸载,同时将主服务器降为备用服务器:
[java] view plaincopy
- [root@masterNode /]# umount /dev/drbd1
- [root@masterNode /]# drbdadm secondary r0
2、然后,登录备用服务器,将备用服务器升为主服务器,同时挂载drbd1设备到 /drbdData目录:
[java] view plaincopy
- [root@masterNode /]# ssh backupnode
- Last login: Sun May 27 19:57:17 2012 from masternode
- [root@backupNode ~]# drbdadm primary r0
- [root@backupNode ~]# mount /dev/drbd1 /drbdData/
3、最后,进入/drbdData目录,就可以看到之前在另外一台机器上放入的数据了,如果没有看到,说明同步失败!