使用ceph-deploy新增OSD节点

admin

使用ceph-deploy新增OSD节点
需求：由于某些原因无法使用salt进行扩容Ceph集群时，可以考虑使用ceph-deploy工具扩容Ceph集群。

操作步骤：
! x/ O8 x1 x7 M9 Q' \! S% Z+ c-> 任选一个monitor节点，安装ceph-deploy。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ~]# yum install ceph-deploy

$ `* b" j) Y- t8 T

->  切换至Ceph集群配置文件所在目录,如使用默认名称ceph,则切换至如下目录。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ~]# cd /etc/ceph

->  编辑/etc/hosts目录，将新增节点的主机名及IP加入该文件中。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ~]# vim /etc/hosts 2 y9 y, `# R( ^5 V! c( \: o% e . ?: b+ |4 @3 x# g- w! }8 w

& b) k- Q: G! k  j. U* H0 n! H
! H4 D: z( O6 b9 _& e3 _6 q# |7 l

->  在新增节点上安装ceph软件，并解决依赖关系，也许需要安装redhat-lsb。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 2 1 y/ }* D# x. V. C5 g! s" z

[root@new-node ~]# yum install ceph [root@new-node ~]# yum install redhat-lsb

4 C# ?7 K7 G6 ?8 R

->  推送相关密钥及配置文件至新增节点。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@host-name ceph]# ceph-deploy admin new-node . L! m" D8 d) V. ~

2 I7 [7 t4 F& ], b

2 p1 y# j4 K7 V) }/ W% Z. G

->  创建集群关系key。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 4 T# t( G! X: j6 t 2

[root@host-name ceph]# ceph-deploy gatherkeys 当前节点 [root@host-name ceph]# ceph-deploy gatherkeys new-node 3 [4 y- r; H" G8 @. ]" h  V

3 P4 R$ g9 ]0 l- ~( ]- {& P) ]1 w8 x

$ g% X) t/ h% u# T8 R: y

->  检查新增OSD节点的磁盘。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 3 Z1 u  y. X# S( [- e9 ^7 z

[root@host-name ceph]# ceph-deploy disk list new-node

( T6 L' D  ^. o: @/ C+ P8 {1 @/ Q
9 `8 |7 c, F9 G' V

->  创建所要新增OSD节点上的osd。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1 3 ]. A: @) x9 K3 i7 W; L

[root@host-name ceph]# ceph-deploy osd create new-node:new-disk / Y6 F: D- v% t* ~9 c 3 z5 Q+ J/ K1 Q$ K& h1 R

->  少数情况下，需要手动激活新增的osd后，集群才能正常识别新增的osd。

[backcolor=rgb(255, 255, 255) !important][size=1em]

1	[root@new-node ~]# ceph-disk activate-all ' \) n4 P) R5 @$ j. ^$ o) u; F

4 Y4 {# U: C3 M6 j# ^4 S

admin

置object副本数量
要设置副本类型POOL的对象副本数,可以使用以下命令:

1
2
8 R1 o9 S" Y4 N+ }" V  m3
: Z9 }: U# V; R2 O4
# B8 ~  z+ C2 s6 w5 W1 O  L[root@ceph ~] sudo ceph osd pool set {pool-name} size {num-replicas}
2 R7 U% i: u% N, I; L4 \4 l+ ^! D- |
例如:
6 \. G, K9 z2 A8 f[root@ceph ~] sudo ceph osd pool set replpool size 3
% D8 Y" Z6 ~. x8 \当一个object的副本数小于规定值时,仍然可以接受I/O请求。为了保证I/O正常,可以为POOL设置最低副本数,如:

2 H# b/ L: W; k& z1
$ C9 G; z. m/ @! m  [( k; ~[root@ceph ~] sudo ceph osd pool set replpool min_size 3
6 X- q( ?4 d1 s; `# N这确保了该POOL内任何副本数小于min_size的对象都不会再进行I/O。