使用ceph-deploy新增OSD节点

admin

使用ceph-deploy新增OSD节点
需求：由于某些原因无法使用salt进行扩容Ceph集群时，可以考虑使用ceph-deploy工具扩容Ceph集群。

操作步骤：
-> 任选一个monitor节点，安装ceph-deploy。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ~]# yum install ceph-deploy . o3 B( `1 S; i1 R! c- U

/ r( |" Q3 W, {7 t# j$ z0 k7 w

->  切换至Ceph集群配置文件所在目录,如使用默认名称ceph,则切换至如下目录。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 % J' `* l$ m' U' y9 S

[root@host-name ~]# cd /etc/ceph % S3 I% }( ^5 a 9 D1 l3 E5 Z# A- P; s" r* O: a

0 W+ j, \% x  M: I

1 n2 V( S6 g3 o! |$ Q

->  编辑/etc/hosts目录，将新增节点的主机名及IP加入该文件中。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ~]# vim /etc/hosts 2 p4 k" i2 P- R# C0 [- }) y

, i- y& s2 Y/ k% l% J
7 q/ [2 b% q9 C# ^

# u" E0 h% n% Z3 o

->  在新增节点上安装ceph软件，并解决依赖关系，也许需要安装redhat-lsb。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 2	[root@new-node ~]# yum install ceph / c1 `- V- j" P8 p; R- k [root@new-node ~]# yum install redhat-lsb

4 E* R. @2 R% B
% z$ T- Z5 r9 r( v9 N8 `. n

. ?: k& _: y, S5 S1 W

->  推送相关密钥及配置文件至新增节点。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 2 Z. U% n- j; k7 r) f; X& y& R

[root@host-name ceph]# ceph-deploy admin new-node 4 O( Q7 C% V6 K9 r

->  创建集群关系key。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 , T- v2 `; W6 _2 U8 W 2

[root@host-name ceph]# ceph-deploy gatherkeys 当前节点 6 g9 S& p/ z/ v8 w+ z1 f1 [4 b& n [root@host-name ceph]# ceph-deploy gatherkeys new-node 2 x: x* \7 t" ^, {8 R ' N. ?( o1 B- w, P4 }

( e- `# V; Y+ b) R1 v! y- ?

->  检查新增OSD节点的磁盘。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ceph]# ceph-deploy disk list new-node 7 ]& M3 J2 ]9 M. a/ c / X9 W1 {2 T3 e3 P9 s

->  创建所要新增OSD节点上的osd。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ceph]# ceph-deploy osd create new-node:new-disk / v+ s2 L8 J/ K8 H7 H! @

1 x- ~4 I3 i' Z1 A9 C1 O2 q

4 T; w" H; B* Z0 `" c+ N

->  少数情况下，需要手动激活新增的osd后，集群才能正常识别新增的osd。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 , q/ c& \0 E. [* n7 V* [

[root@new-node ~]# ceph-disk activate-all

: E5 _" p1 c: f4 o- k/ X

5 a9 b  P- ~4 O- I! q- M: c

admin

置object副本数量
要设置副本类型POOL的对象副本数,可以使用以下命令:

1
6 K$ ~% U; ~! _- V2
3
4
[root@ceph ~] sudo ceph osd pool set {pool-name} size {num-replicas}

; d4 p. ?' \/ b& t4 m5 Q例如:
. u6 Y: E) C, X& n% J8 y+ O* e7 c5 t[root@ceph ~] sudo ceph osd pool set replpool size 3
当一个object的副本数小于规定值时,仍然可以接受I/O请求。为了保证I/O正常,可以为POOL设置最低副本数,如:

6 d- V7 i! b, ^# V* N) n8 N% b1
[root@ceph ~] sudo ceph osd pool set replpool min_size 3
这确保了该POOL内任何副本数小于min_size的对象都不会再进行I/O。