drbd安装部署实施方法

admin

1、配置文件介绍
6 p, Q3 M( X' `
    drbd的主配置文件为/etc/drbd.conf；为了管理的便捷性，目前通常会将些配置文件分成多个部分，且都保存至/etc/drbd.d目录中，主配置文件中仅使用"include"指令将这些配置文件片断整合起来。通常，/etc/drbd.d目录中的配置文件为global_common.conf和所有以.res结尾的文件。其中global_common.conf中主要定义global段和common段，而每一个.res的文件用于定义一个资源。

    在配置文件中，global段仅能出现一次，且如果所有的配置信息都保存至同一个配置文件中而不分开为多个文件的话，global段必须位于配置文件的最开始处。目前global段中可以定义的参数仅有minor-count, dialog-refresh, disable-ip-verification和usage-count。
8 [8 n9 O6 }2 L" E. x
    common段则用于定义被每一个资源默认继承的参数，可以在资源定义中使用的参数都可以在common段中定义。实际应用中，common段并非必须，但建议将多个资源共享的参数定义为common段中的参数以降低配置文件的复杂度。
% Q! A5 d" T+ D; B, q9 A/ v1 o
7 B& G0 O/ g, \" W4 ~    resource段则用于定义drbd资源，每个资源通常定义在一个单独的位于/etc/drbd.d目录中的以.res结尾的文件中。资源在定义时必须为其命名，名字可以由非空白的ASCII字符组成。每一个资源段的定义中至少要包含两个host子段，以定义此资源关联至的节点，其它参数均可以从common段或drbd的默认中进行继承而无须定义。
! r! b. B5 _2 |# f4 M
以下是我的配置事例：

#cat /etc/drbd.d/global-common.conf

7 }' m0 h  h" Y) n, v4 H8 R+ x

9 G# k' n" C$ s! ]. a. _
  X- \' k& J: iglobal {
        usage-count no;
        # minor-count dialog-refresh disable-ip-verification
}
common {
        protocol C;
        handlers {
                pri-on-incon-degr "/usr/lib/drbd/notify-pri-on-incon-degr.sh; /usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ; reboot -f";
                pri-lost-after-sb "/usr/lib/drbd/notify-pri-lost-after-sb.sh; /usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ; reboot -f";
                local-io-error "/usr/lib/drbd/notify-io-error.sh; /usr/lib/drbd/notify-emergency-shutdown.sh; echo o > /proc/sysrq-trigger ; halt -f";
) Y2 }7 G) h& h9 ]; A) P                # fence-peer "/usr/lib/drbd/crm-fence-peer.sh";
5 D& {. \: U) @) @& e9 Z                # split-brain "/usr/lib/drbd/notify-split-brain.sh root";
                # out-of-sync "/usr/lib/drbd/notify-out-of-sync.sh root";
& }- B- e9 }  i; l' _                # before-resync-target "/usr/lib/drbd/snapshot-resync-target-lvm.sh -p 15 -- -c 16k";
                # after-resync-target /usr/lib/drbd/unsnapshot-resync-target-lvm.sh;
* Y2 w  t* h9 L% h8 c! F; D        }
6 Z; ~( R5 v  N& p2 |        startup {
                #wfc-timeout 120;
                #degr-wfc-timeout 120;
2 ]( ]1 s: I, y5 d        }
# @/ e" R2 m- W  o        disk {
0 |* ]4 _- F) D1 ]                on-io-error detach;
                #fencing resource-only;
        }
0 e+ |4 b9 I9 F) X5 @0 r        net {
3 {; V. Z* J" S/ W( @  I                cram-hmac-alg "sha1";
; m+ M& h' y7 ^& {                shared-secret "mydrbd";
        }
        syncer {
5 Q- p. k8 J' E5 u8 e3 @                rate 1000M;
        }
7 g* y& c- Z, u5 D}
0 D7 Q# A. i9 E0 {5 Q( R, {9 T2、定义一个资源/etc/drbd.d/web.res，内容如下：

0 `8 j, L8 s- v) R' l5 o6 I' `3 X  v$ `

resource web {
  O; w5 k7 d# q4 r  on node1.wzlinux.com {
    device    /dev/drbd0;
, g3 ^% }* T' Y5 [& k    disk      /dev/sdb;
2 u* |, j# c7 n* T" h7 @9 V. L    address   192.168.0.10:7789;
) a% |4 F' Q  M    meta-disk internal;
, y( P" r- C% D9 b- u( N  Q) V  }
# I* S( D& i& p& o5 x$ j  on node2.wzlinux.com {
    device    /dev/drbd0;
    disk      /dev/sdb;
( p( {2 k2 P+ j3 {% ]    address   192.168.0.11:7789;
    meta-disk internal;
5 b9 |  i2 ^- `0 H: I! G+ F  }
}
注：以上配置在两个节点上必须相同
) k0 _) ^5 X, L/ D" @3 [
( O+ V, _) V# P* u  w, F
! q4 u, j+ i! J6 d+ S
四、drbd启动和查看
  P% z' |6 f4 S0 ?9 l
! H' T! j; ~  Z# H, P" U1 q: i1、初始化资源

在Node1和Node2上分别执行：
$ j  E: v+ L1 |0 H9 K8 a- J* W
- z! L+ }4 G' e) X# drbdadm create-md web
& A* l# c% U2 m; c6 G
wKiom1Zuaaezfc2oAABvnsE2UA0970.jpg
4 t% b1 i6 C: {; F4 o0 P
2、启动服务
9 H6 T" y8 I- S) I/ P$ T# ]
在Node1和Node2上分别执行：
/ D' Q' d' u1 P$ L" O- ]
, F* n+ j* K' W: s! t# service drbd start

wKiom1Zuad-yY6IVAAA5oMSEnj0629.jpg
; j$ s" z2 O5 O4 T% @# Q6 W+ [
$ a) _: j- P) U) k+ h, J9 ^3、查看启动状态


4 {. {. M0 @: x/ I' J1 Z- _

* E& u9 ]3 I& j/ X, i0 h9 Pcat  /proc/drbd        #或者直接使用命令drbd-overview
4 n* d/ X/ b- u# J! O9 l  jwKiom1ZubITTPfQFAABtRuKmbw0960.jpg
3 [9 L, P2 Q: d1 V6 }0 F* z
. U( u' x" v" n+ c/ d+ I    从上面的信息中可以看出此时两个节点均处于Secondary状态。于是，我们接下来需要将其中一个节点设置为Primary。在要设置为Primary的节点上执行如下命令：


. b8 T- U; ?( y9 s- U% N

drbdadm primary --force web
1 g+ q: t) `8 B8 O. g! m3 B* [    然后我们再去查看状态，可以看到数据在同步中。
: y) e$ S( x5 Y: \
wKiom1Zub52A0x25AACE9DA7R5s955.jpg
) k( I$ L2 j5 V3 a7 k' B
注： 也可以在要设置为Primary的节点上使用如下命令来设置主节点：

     # drbdadm -- --overwrite-data-of-peer primary web

    等数据同步完成以后再次查看状态，可以发现节点已经牌实时状态，且节点已经有了主次：

9 b3 X5 S  Q, T8 e& G2 u" d4 OwKioL1ZucCri9IWoAABunqEsX6c581.jpg

6 k( |/ }+ ~& M' U+ t% ~: @2 [+ V4、创建文件系统
7 ?4 s4 u! c3 ?4 E6 r% u5 K" \
0 j9 F$ p' Y) e0 G4 r, V    文件系统的挂载只能在Primary节点进行，因此，也只有在设置了主节点后才能对drbd设备进行格式化：
  V3 F. B4 e+ u$ y) j
& ^" r. ~/ D* n3 k8 ]& N


mkfs.ext4 /dev/drbd0
( ?, {0 y4 y* n. Imount  /dev/drbd0  /var/www/html
" A4 C" D- f& H: E( xwKioL1ZucXTzM6dgAABh9dm3wdc516.jpg
# l- L2 v3 q8 K& p9 C9 X
' A& h( u6 f8 [, a) \5、切换Primary和Secondary节点
" T; @6 B& {1 L. `4 A
. Y% T' ^' l3 Y9 Q/ y: j3 q/ k% [    对主Primary/Secondary模型的drbd服务来讲，在某个时刻只能有一个节点为Primary，因此，要切换两个节点的角色，只能在先将原有的Primary节点设置为Secondary后，才能原来的Secondary节点设置为Primary:
& n" A& O1 S, V9 M/ F, v( G% A4 A
6 Q! i1 Z9 o$ _Node1:
) r/ v$ W: Q3 |/ q, b

' n" q7 L; D. @, C8 \3 e
1 w% T" ]. u7 ?+ G4 p2 P  V
( _3 o: U( V$ P* x, X6 Zcp  /etc/fstab  /var/www/html/        #复制一个测试文件
umount  /var/www/html
drbdadm secondary web              #设定为备节点
查看状态：
3 B8 e5 p  }: j& q/ K  G9 {


# drbd-overview
  0:web  Connected Secondary/Secondary  UpToDate/UpToDate  C r----
Node2:
9 `% E; `) y/ N, j3 a) t0 h: g, x

( V5 z/ [, K% S  T. ]! \" [
drbdadm primary web             #提升为主节点
drbd-overview                   #查看状态是否提升成功
% a  A5 K% j( X1 umount  /dev/drbd0  /var/www/html   #挂载文件
/ f3 d4 C9 D6 U0 T' R9 M# `    使用下面的命令查看在此前在主节点上复制至此设备的文件是否存在：


$ C# ]. r3 i! h. d: r4 P         1
; s/ w- l9 [" B+ d2 g9 A
4 V/ O5 g+ M. D- C$ O1 kll /var/www/html/
wKiom1Zuc0Cgl5JqAAAw2zqGE2k492.jpg
; ]' j( H3 U5 S0 ~
    到目前为止WEB服务的数据可以实现实时同步，只要把WEB服务搭建起来就可以直接使用了，非常方便。