找回密码
 注册
查看: 3922|回复: 1

ceph 下osd删除过程记录清除集群

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2021-4-21 14:00:05 | 显示全部楼层 |阅读模式
systemctl stop ceph-osd@4.service , r1 n5 s2 v' [2 p
systemctl |grep osd. b5 E! S" [( s7 J5 W: M+ `5 ?( f
systemctl status ceph-osd*# P! c% Z) p6 v
) m/ m# o7 U8 _  u  `- v
[root@controller deploy]# ceph osd tree9 c  ~, H- f8 U7 |6 N3 z
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF & ?3 M& R: F' B: p( _$ l# }
-1       0.05875 root default                                
: l$ A; M& d; {9 h, i& D- P-3       0.05875     host controller                        
, P# x3 R0 I4 m0 @) z 0   hdd 0.00200         osd.0           up  1.00000 1.00000 6 X: f" G# i6 t5 L- g% \) S9 e' V
1   hdd 0.00099         osd.1           up  1.00000 1.00000
8 ^* Y, e/ B( I: \ 2   hdd 0.01859         osd.2           up  1.00000 1.00000
/ x5 X# Z% N$ w: D% H 3   hdd 0.01859         osd.3           up  1.00000 1.00000
  I( b' H0 V; Z2 p4 }' ` 4   hdd 0.01859         osd.4         down  1.00000 1.00000
/ C  g% O: Q0 m  i3 d% F0 r8 S# }[root@controller deploy]# systemctl stop ceph-osd@3.service# m3 U$ d2 H$ n6 ~8 \
[root@controller deploy]# ceph osd tree
& G- e! ]4 N  g9 nID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
& h5 ^+ _2 n9 W& W9 j-1       0.05875 root default                                * O4 w; ~% j3 f, f
-3       0.05875     host controller                         * D7 K" Y- [- Y* {# Y
0   hdd 0.00200         osd.0           up  1.00000 1.00000
+ q5 h' o8 W' K9 s( v3 H" [. ?  o 1   hdd 0.00099         osd.1           up  1.00000 1.00000
( Y/ Q( u9 m* b% c, }2 u 2   hdd 0.01859         osd.2           up  1.00000 1.00000 : I9 a- n, X3 q9 p( @) s7 k0 U
3   hdd 0.01859         osd.3         down  1.00000 1.00000 " T! t* p0 A0 @8 `0 v1 s
4   hdd 0.01859         osd.4         down  1.00000 1.00000 * [3 k* u; O  [. ~
$ X0 t, k" e; ?4 s0 s# q' r
[root@controller deploy]# ceph osd out osd.48 R* Z" M& s9 z1 t# v1 A9 D
marked out osd.4.
7 H# X" Y& n7 e6 U6 J, ^- ^[root@controller deploy]# ceph osd tree& J4 a6 i- @2 M6 W% R
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF ) y( s  L6 P3 L! n
-1       0.05875 root default                                0 e- w% P4 m: s. L+ V5 i+ L
-3       0.05875     host controller                        
/ w2 k' _5 s; g0 }2 F! _  x! g 0   hdd 0.00200         osd.0           up  1.00000 1.00000 1 V6 u' C" L4 V3 A: o2 ]% g
1   hdd 0.00099         osd.1           up  1.00000 1.00000 ' e4 O3 @! |  u1 Y) P: @) l1 g3 w
2   hdd 0.01859         osd.2           up  1.00000 1.00000
  X4 o8 s0 l" j, T7 F, a 3   hdd 0.01859         osd.3         down  1.00000 1.00000 + j* G+ X5 J4 c
4   hdd 0.01859         osd.4         down        0 1.00000
3 K$ J& i4 T; t! ^[root@controller deploy]# ceph osd out osd.3
! b! K) ^6 z. S1 q& H* hmarked out osd.3. 7 V3 n/ }2 x- g
[root@controller deploy]# ceph osd tree+ y3 ?& q) G3 t. t8 d8 M$ Z: }4 I
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF # ?0 h- X) R* H; _, \. u4 M
-1       0.05875 root default                                
& m$ }/ T' a2 D  u1 {-3       0.05875     host controller                         . X# Y. Q; N9 ~! P( M
0   hdd 0.00200         osd.0           up  1.00000 1.00000
6 b6 A% N0 z+ s3 s# ?" g( j 1   hdd 0.00099         osd.1           up  1.00000 1.00000
! u9 Z1 O. ~6 _1 K/ Q+ z. Y 2   hdd 0.01859         osd.2           up  1.00000 1.00000 ' m" y+ o* V5 G% G- U( [! E0 G
3   hdd 0.01859         osd.3         down        0 1.00000 # ~/ T- Q! B  b- G7 `; t4 Q# K; l) s
4   hdd 0.01859         osd.4         down        0 1.00000 & }+ i$ d0 j. v8 W/ X

; u/ N0 i" ]4 m5 J9 [5 w, t[root@controller deploy]# ceph osd crush remove osd.4- k9 _) f' W+ f4 v8 T
removed item id 4 name 'osd.4' from crush map
: L6 u$ }" [8 M% I3 X5 l
- Q  G+ w8 p, ]1 F, E' u[root@controller deploy]# ceph auth del osd.4: m+ ]. t* F8 V; e. k
updated" U7 H/ {* [: I# @

& W4 F* @+ T( h" f- m[root@controller deploy]# ceph osd tree$ u. ]" G6 h( ?8 _/ S
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
8 J2 A5 s9 `5 ^. Q6 U0 K; [-1       0.04016 root default                                2 k; z7 L2 O/ h& d7 \: e
-3       0.04016     host controller                        
! q* S: c# ?: t( Z) K9 ? 0   hdd 0.00200         osd.0           up  1.00000 1.00000
! z: _" N: X$ F3 A; c 1   hdd 0.00099         osd.1           up  1.00000 1.00000
; P* }. K+ O3 L' f) ]: r 2   hdd 0.01859         osd.2           up  1.00000 1.00000 : t3 d* `- I# y
3   hdd 0.01859         osd.3         down        0 1.00000
; g0 W( a/ U" S 4             0 osd.4                 down        0 1.00000 ! o/ N2 h9 u: H4 q; V! W5 T

7 G7 O: g! S: x5 I
: n" \- e" X% }8 d, b, r[root@controller deploy]# ceph osd rm osd.4
  q6 q. u+ P1 R9 }4 ?; B6 l: j% Cremoved osd.4
. U8 U$ `8 h) y4 g1 x( I4 i0 N" f: d- V

/ V' b+ u  B$ T[root@controller deploy]# ceph osd tree
1 F! u4 Y. q/ p  ^: d  nID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
) u- ~2 b& ?! L  Z$ S- f-1       0.04016 root default                                % Z' ?" S: S2 r0 u2 V) ]
-3       0.04016     host controller                        
" p2 Z! }- W: l& G 0   hdd 0.00200         osd.0           up  1.00000 1.00000 + K( u* F  c, z# I
1   hdd 0.00099         osd.1           up  1.00000 1.00000 ' s3 D* l3 g8 x$ P1 _4 g6 H* T3 q
2   hdd 0.01859         osd.2           up  1.00000 1.00000
# ~1 Q% Q/ h! }+ c+ v 3   hdd 0.01859         osd.3         down        0 1.00000
. B, _# p0 r* t, c2 S; w[root@controller deploy]# ceph osd crush remove osd.3" E+ A- O6 U* O7 ]) Y: Z: Q3 g# \
removed item id 3 name 'osd.3' from crush map6 k2 {& ?1 `& P* P$ T+ E' |* ?

- ~0 z! {" r  T% ?7 \[root@controller deploy]# ceph -s, w3 j3 o0 S3 l1 W; {/ Q
  cluster:
$ q9 H3 B1 S* e    id:     b0657efa-ec62-452d-8354-9c8f3dde3703
& n; H, s6 y! j6 A) {% B" i    health: HEALTH_OK( Z# G. k1 T0 l. L" L
/ K1 ?9 F- D; L$ b
  services:# h: o* U6 Q: z( q4 L; v/ R
    mon: 1 daemons, quorum controller (age 16m)% S5 K: b4 ~, d* G# C* u
    mgr: controller(active, since 17h)
4 D6 L* y2 G% f    osd: 4 osds: 3 up (since 4m), 3 in (since 3m)7 M0 {) F* e7 f  X9 s
& M; C! l& N+ ~* g+ i
  data:) `0 ~4 z5 H, d$ `
    pools:   0 pools, 0 pgs
& K; S$ M) L0 B    objects: 0 objects, 0 B
; d* }1 F) j9 W, b4 W# n6 Q+ p    usage:   2.4 GiB used, 20 GiB / 22 GiB avail) @' D' A  M3 i4 O
    pgs:     
+ B( O1 [9 `" A# `* z% g* m
7 y6 m8 Y- j9 A0 U; i[root@controller deploy]# ceph osd tree( E# a+ D3 T7 o$ ]8 |
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
: X1 V. Z7 R; ~% s- |-1       0.02158 root default                                
2 T: J8 U7 X9 }( F. c9 w" m& l-3       0.02158     host controller                         ! E; i% b4 q8 F: c4 D8 _
0   hdd 0.00200         osd.0           up  1.00000 1.00000 & c% B" W4 s0 y3 m
1   hdd 0.00099         osd.1           up  1.00000 1.00000
5 \7 B; ^' D& g; R 2   hdd 0.01859         osd.2           up  1.00000 1.00000
4 M/ j( I/ \+ z9 h/ {+ |4 Z4 l 3             0 osd.3                 down        0 1.00000
, i" R, w% e0 |' H2 S; `3 L& z: n/ M
[root@controller deploy]# ceph auth del osd.3. {& e5 N  G7 }( x' y% P
updated
% J6 |; x; }  p, F
4 L# i3 B! j9 k1 I4 T$ o: u( Z+ L: a  G  g
[root@controller deploy]# ceph osd tree
4 p5 W* J0 R/ ~% z5 R3 q  J. rID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
& u  m7 S& W6 W3 S# r' ?2 n0 i+ q-1       0.02158 root default                                , h/ j+ U* h" M! p/ {( v
-3       0.02158     host controller                        
2 G6 f2 t5 K" W8 b6 C. _ 0   hdd 0.00200         osd.0           up  1.00000 1.00000
% g8 @9 J  {2 e* P 1   hdd 0.00099         osd.1           up  1.00000 1.00000 4 v6 J+ @7 b* H+ |, J1 D
2   hdd 0.01859         osd.2           up  1.00000 1.00000
& X& c: v  S$ I: [, ]9 I3 D0 f 3             0 osd.3                 down        0 1.00000
, w1 B  p3 h3 }2 y( d
; M& c, H7 h! Z5 w) E4 O- \: e6 p$ y6 r% v- y1 ?' U/ s7 K
[root@controller deploy]# ceph osd rm osd.3
5 B5 G2 H( ]) m" m- nremoved osd.3
! h$ V  F1 u! F/ y6 T7 f  o
9 f5 }# s% {/ x$ d! [( V% w/ X! E. ?7 I  V( V: D' ?3 H3 D5 o
[root@controller deploy]# ceph osd tree
# P5 k* a- r' L* Z* A3 DID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
1 I, r1 L, V3 [" R/ b7 W4 o; G-1       0.02158 root default                                ( O! |4 P3 }( @% X7 O, v
-3       0.02158     host controller                        
7 U; S0 p' b( ]5 P7 O 0   hdd 0.00200         osd.0           up  1.00000 1.00000
0 F% x9 b' X3 e- I) C7 F 1   hdd 0.00099         osd.1           up  1.00000 1.00000
; @" Y; j. [. q( r- Z. Q/ g! M 2   hdd 0.01859         osd.2           up  1.00000 1.00000
5 p5 ^0 S" @' l/ ?' p
2 J( o4 W0 G* f3 O; [" B5 i% d清楚集群
0 ^& C" _6 l% Z3 [0 ~删除系统的pv和vg和lv
8 _% |) ^5 J) w) w/ u' p4 J
8 S9 _# U0 S/ L1 `* U. I
) P) i% P  l* c
7 C* r2 ^! E  E- C9 Z

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2021-4-21 14:15:55 | 显示全部楼层
for i in `vgscan |grep ceph |awk -F "\"" '{print $2}'` ;do vgremove $i;done" X7 N+ H. Q) r2 t5 W

& c# n3 j& c; e) g/ [# o
, A. v4 l5 c/ @8 h: s* qfor i in {b..k};do pvremove /dev/sd$i;done
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 02:01 , Processed in 0.017789 second(s), 23 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表