找回密码
 注册
查看: 1082|回复: 1

2 scrub errors; Possible data damage;ceph分布式存储报错解决

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-4-22 14:45:30 | 显示全部楼层 |阅读模式
2 scrub errors; Possible data damage
1 ]" K/ Z& Y- P8 G6 a
1 O$ }1 x1 s- R5 F! W8 i ceph health detail % \0 Y) M! H! H! b0 q
HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 14302 sec, mon.compute01 has slow ops
" p4 _5 B1 \# y8 E4 JOSD_SCRUB_ERRORS 2 scrub errors
2 c5 C9 ~2 o; m' Y( A+ K6 y# m, X% z: v  S) ?% X
( A5 }/ Y$ |, T5 a  A
HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 14302 sec, mon.compute01 has slow ops. f0 F8 Y2 T0 i3 L" O
OSD_SCRUB_ERRORS 2 scrub errors: s5 v# ]6 V1 e0 l- p
PG_DAMAGED Possible data damage: 2 pgs inconsistent
; }- b! _$ l' X7 Q    pg 9.b4 is active+clean+inconsistent, acting [10,11]
1 T7 i6 ~% w6 o4 `    pg 9.176 is active+clean+inconsistent, acting [10,11]
" G. E( F3 n/ r
: N  p$ Q* ]8 B) A找出异常的 pg,然后到对应的osd所在主机上修复。- ~# t% r" A# a: P5 c4 K) Q

+ ^* V4 Z* \, H( c! \  s$ v- `[root@compute01 ~]# ceph osd find 10
3 `+ _6 j2 q" q# }{# p3 Q/ y2 _* u' b; F8 V! k* D
    "osd": 10,
$ u! L7 T6 o) Q; ^8 v/ a    "addrs": {
0 }* m# d" q5 Q6 m+ J( i        "addrvec": [
! Z/ H( |4 i2 c  y6 r; c  g  e            {
3 E% {5 \' N! U" Z" e0 u                "type": "v2",) r7 G5 G* Y/ ~2 K
                "addr": "192.168.0.77:6804",
; [" S7 a- F/ N, N                "nonce": 2018
* F, Q* p3 i3 B            },- C& f& \9 M9 N+ w" M) c9 c
            {
8 z1 Q% Z; H3 V" z# A: n                "type": "v1",5 ^6 N" [, J7 @, K7 ^0 J
                "addr": "192.168.0.77:6805",
3 o9 _: o* s& v! d& j" ?* M- `                "nonce": 2018
/ \; q" i" g( E3 R. p# B: T1 u            }
% R; G$ L( L3 b        ]) e5 M$ e4 A6 e/ @- q5 S
    },* U4 t4 v2 n& ?& z* c* `8 j$ O

! v) x6 E* w- n5 L% k: o5 Z
' H0 a# T; h8 m* R; L7 n' O1 {4 ~- d9 q$ i1 b
[root@compute01 ~]# ceph osd find 11, o  o$ a6 E0 P. K3 ]
{9 u: c7 R6 t3 ~5 }5 s0 a( @9 c
    "osd": 11,8 L7 e" ?' C1 S, @$ c# I9 L
    "addrs": {
5 k5 b$ [3 D# P& f' P$ z        "addrvec": [
& {( D5 U# g( t8 M8 ^            {* W) u' d/ m' s6 j1 F1 z
                "type": "v2",+ G, @$ ~! r; V1 d* [
                "addr": "192.168.0.79:6800",( L& C) I% W7 {3 q# ~1 L
                "nonce": 2194. B1 p% @/ M4 K. B5 S- B) u& X
            },0 G2 b& w4 Q. w( C& U& s
            {
6 p3 Z1 K) G& ^) D1 [                "type": "v1",7 ]# f$ ]5 a; X0 V% {. F* ^
                "addr": "192.168.0.79:6801",
7 {& M& V2 \8 R                "nonce": 2194
) z+ B+ M3 N8 E* [3 N# G' ?+ e            }
$ b, ]7 ]5 s. N; B8 _        ]
; F6 [# K6 E# \0 F  ^" ~* Y: K" ?    },
9 X: a% @" i; g' l   % `: F0 ^& q) i1 }4 z# Q

: a% u2 K4 e+ O1 K& e" y9 H& ^7 f然后到 进行修复
' e2 U9 E! M8 y9 d  o. s1、停止osd
# G7 O/ |6 t: N' lsystemctl stop ceph-osd@10
3 J0 ~+ o+ a7 w% j1 [& F& |! j2 D
. U& l1 r& V1 s4 W3 o  o
2、刷入日志1 x: W: B9 S0 u4 M
ceph-osd -i 10 --flush-journal
7 C+ B# |% a3 P; g$ a5 p
8 w& u! G# s4 _" q% u2 p/ @3、启动osd
( V: D# c( S# r' t  o& ]5 xsystemctl start ceph-osd@10
8 f' F( ]0 x9 r, c
* a* M) i& V+ d. r* J7 v# S4、修复(一般不需要)& E2 {7 Y3 v. {
[root@compute01 ~]# ceph health detail
' M! l/ l& l: c6 C6 ZHEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 15223 sec, mon.compute01 has slow ops
8 G/ O. ~8 J0 e( h$ JOSD_SCRUB_ERRORS 2 scrub errors
. O( X3 y8 w! C; @* m# ?7 gPG_DAMAGED Possible data damage: 2 pgs inconsistent8 w& U3 b" ~; d& k7 I( y
    pg 9.b4 is active+clean+inconsistent, acting [10,11]$ T! E  f$ N) v6 J" l
    pg 9.176 is active+clean+inconsistent, acting [10,11], e7 \: \% r  H( g1 @) p
SLOW_OPS 1 slow ops, oldest one blocked for 15223 sec, mon.compute01 has slow ops
6 a4 _/ K9 l* a[root@compute01 ~]# ceph pg  repair 9.b4
, r! n' H$ T1 ^. Zinstructing pg 9.b4 on osd.10 to repair
& n) h$ V$ a5 R+ K9 }[root@compute01 ~]# ceph pg  repair 9.176" o% ?7 D/ @/ B8 }  A* F( @
instructing pg 9.176 on osd.10 to repair
8 O1 {2 l1 d! z4 ~- D[root@compute01 ~]# ceph health detail , \8 Z* F' J- W" M
HEALTH_ERR 1 scrub errors; Possible data damage: 1 pg inconsistent; 1 slow ops, oldest one blocked for 15248 sec, mon.compute01 has slow ops0 V% p' z# Y( Z% w5 `
OSD_SCRUB_ERRORS 1 scrub errors7 y2 ~) c# K  ]
PG_DAMAGED Possible data damage: 1 pg inconsistent
2 u0 O: Q' ?2 F; p/ H$ R    pg 9.176 is active+clean+inconsistent, acting [10,11]
. _. b( q1 R8 q8 [. K  cSLOW_OPS 1 slow ops, oldest one blocked for 15248 sec, mon.compute01 has slow ops
% L1 b" d9 @- |7 f7 U7 J! [0 q+ K1 \8 f7 C  V
[root@compute01 ~]# ceph pg  repair 9.176# x) F. a& K" R7 n. M  ~4 h
instructing pg 9.176 on osd.10 to repair+ {6 w2 C6 d4 Q* ]' I+ S1 I

  l$ k/ X; h" H% Y8 s1 K2 Z
7 `( a5 ^1 u& }- \! c[root@compute01 ~]# ceph health detail
. |& K! f9 `, q. CHEALTH_WARN 1 slow ops, oldest one blocked for 15428 sec, mon.compute01 has slow ops
* ^( j7 `7 _; f7 |/ {9 }8 {SLOW_OPS 1 slow ops, oldest one blocked for 15428 sec, mon.compute01 has slow ops
! }7 t; H- f7 `3 {- v5 q/ f; Q
1 N* v5 a5 A- h9 W5 V, o9 d5、查看pg所在osd
# n* C: ?- I, a( x/ ~. G
( h# h7 e3 T; p* p! q3 ]/ F3 W. G) q
[root@compute01 ~]# ceph pg ls |grep 9.176# H' A% V' ?; o* R
8.170      132        0         0       0 526352384          76          8 3097 active+clean    5h   5608'93397  5608:450045 [13,12]p13 [13,12]p13 2022-04-21 19:13:30.921762 2022-04-21 19:13:30.921762 & @3 Y. x/ B* D0 ~+ F
9.176       42        0         0       0 173498368           0          0 3053 active+clean   40s    5608'3953   5608:14566 [10,11]p10 [10,11]p10 2022-04-22 14:53:31.563896 2022-04-22 14:53:31.563896
; j2 Y7 Q/ |8 e1 [  `8 b4 b11.21f      11        0         0       0  46137344           0          0 3132 active+clean    3h   5608'11532  5608:248817 [19,25]p19 [19,25]p19 2022-04-21 19:16:58.899176 2022-04-14 21:11:36.151702
" I; E( k  l4 {9 V/ E  u4 V
4 @4 J2 N, i) p' Y
1 g! J7 ?  N4 R4 W可以确认集群恢复OK。PG还是在 osd.10上。* O, y- t/ x, B
6 P: @0 R0 I5 @* ~/ C& T  U- n0 u
0 r! G, B! f# J" f+ K* d

! k" O/ H  |6 L% C' m# w! A8 p5 H
, e2 s8 \9 T8 h" {/ B% U( M
6 U9 t: Y% k) }4 K) y

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-4-22 14:58:06 | 显示全部楼层
[root@compute01 ~]# ceph osd status  ( }  |. J8 e, i$ @4 ^1 A
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+1 c! l3 g' f8 z% p- f$ c
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |6 c6 A6 u4 @8 D" d
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+0 F' L/ t& e6 z: L/ ~/ p6 E/ D5 R
| 0  | compute01 | 16.0G |  878G |    0   |     0   |    0   |     0   | exists,up |1 A$ T5 H& ?* |9 A
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
" B. m' f9 ~. g| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |' G2 F3 n7 \- X+ R
| 3  | compute02 | 21.9G |  872G |    0   |   819   |    0   |     0   | exists,up |' @4 Y" u1 ~1 Q) R7 H' `
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
( v: V+ E+ F+ O: _/ ]3 [| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |, T* K% \7 [0 @- ?7 u$ e
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |; Q% n8 V* W, l) X% F
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |5 @. m+ a& h( S" s
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |
0 t2 B) e7 c% o9 }| 9  | compute01 | 58.2G |  500G |    1   |  9216   |    2   |    36   | exists,up |
; l) J1 U0 o1 {) U0 e& O| 10 | compute02 | 60.4G |  498G |    4   |  35.0k  |    7   |   136   | exists,up |
: ]5 t5 U- f: N1 [5 p" G' ~| 11 | compute03 | 57.8G |  501G |   13   |  98.5k  |   17   |   637   | exists,up |
; h, w: z7 _: x+ b5 P# n& Z| 12 | compute01 |  269G | 1966G |  188   |  2407k  |   40   |   762   | exists,up |
- U( O( g' I: X0 N| 13 | compute02 |  269G | 1966G |  102   |  2569k  |   46   |  1969   | exists,up |
. ]# W9 g, B/ p  `| 14 | compute04 | 5873M | 7446G |    0   |   820k  |    0   |     0   | exists,up |8 J6 q, }2 L! G: I; u; w  f
| 15 | compute04 | 5368M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
7 _0 _& Q  w9 V6 N| 16 | compute04 | 5501M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
7 }$ d% W3 I1 Q0 D| 17 | compute05 | 4821M | 7447G |    0   |   819k  |    0   |     0   | exists,up |5 c+ p$ R# G. Z3 y' c* E& g- o
| 18 | compute05 | 5665M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
6 m1 O2 C8 @( W" z+ o| 19 | compute05 | 5935M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |' {" j  |: }' q
| 20 | compute06 | 6255M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
) P, a/ Q+ A1 Z2 m| 21 | compute06 | 6037M | 7446G |    0   |   822k  |    0   |     0   | exists,up |
: ~0 G. W% J' x" p% _9 E/ C6 X| 22 | compute06 | 5503M | 7446G |    0   |  1640k  |    0   |     0   | exists,up |
5 h! W. s* e1 ?| 23 | compute07 | 5569M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
' |+ v: h. \4 J; R6 y7 [: F| 24 | compute07 | 5670M | 7446G |    1   |   827k  |    0   |     0   | exists,up |2 J1 h) o( P/ ^' [+ s
| 25 | compute07 | 5357M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
$ r: C3 ^0 b7 F; Z7 ]| 26 | compute08 | 4988M | 7447G |    0   |     0   |    0   |     0   | exists,up |
  S1 Q- f! \) k( B$ W, N& L3 k| 27 | compute08 | 6087M | 7446G |    0   |     0   |    0   |     0   | exists,up |" T% F: v: r0 r" k# V2 O! Y; k- n
| 28 | compute08 | 7006M | 7445G |    0   |  1641k  |    0   |     0   | exists,up |
. q1 Q- ~; _+ S| 29 | compute09 | 5317M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |4 A; I8 P; c$ ~" h4 D7 o- W
| 30 | compute09 | 5364M | 7446G |    0   |  2460k  |    0   |     0   | exists,up |5 M3 B5 A" t  ~/ \& S, i
| 31 | compute09 | 5200M | 7446G |    0   |   819k  |    0   |     0   | exists,up |! b6 C0 [' R6 i" W5 W& A/ q# q  }% ?
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
( u0 ?- r0 _4 l6 G[root@compute01 ~]# ceph osd status  ) b2 i! {; Z6 [3 U
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+2 B! s' i& A8 q# @& N
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
+ E8 `5 _6 b1 [9 j  J+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
! o' N  s+ c6 H5 x# ^) L| 0  | compute01 | 16.1G |  878G |    0   |   819   |    0   |     0   | exists,up |
& K- P0 a8 v4 j# a6 H| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |, U1 E, [1 I  [7 Z
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |2 ]* ?3 r, M( X$ z! o7 t
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
9 w, ^+ H5 O4 _  [' M/ m6 F| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |1 C) J4 l& ^  P( [8 l
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
  Y8 z  E7 c, \; ?' p9 @" ~| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |4 r3 B, T" c4 V7 \$ R# H
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
5 X7 F- s+ k/ H" E" S- k  ^+ c| 8  | compute03 | 20.4G |  426G |    0   |     0   |   33   |   798   | exists,up |" F  s2 i1 \  w) R+ T; Q
| 9  | compute01 | 58.2G |  500G |    1   |  90.7k  |    3   |    72   | exists,up |1 z, n# f9 i" [. D
| 10 | compute02 | 60.4G |  498G |    3   |  28.8k  |   14   |   272   | exists,up |  i' x* Y& K- f
| 11 | compute03 | 57.8G |  501G |   13   |   223k  |   32   |  1275   | exists,up |
+ A4 J  z7 @$ m, V8 M+ j- j| 12 | compute01 |  269G | 1966G |  210   |  3195k  |   44   |   842   | exists,up |
+ `& E. ~% A6 C, z# p| 13 | compute02 |  269G | 1966G |  185   |  3461k  |   68   |  3538   | exists,up |& A: r3 o- D" `$ n" x
| 14 | compute04 | 5981M | 7446G |    0   |  3276k  |    1   |    32   | exists,up |
! g- D6 p  z8 R1 Y& D9 N( l| 15 | compute04 | 5448M | 7446G |    0   |  2457k  |    0   |     0   | exists,up |
( B/ k2 A7 ~* `9 I4 ~| 16 | compute04 | 5581M | 7446G |    0   |     0   |    0   |     0   | exists,up |
1 `' v+ C; l, K% K% M6 t| 17 | compute05 | 4901M | 7447G |    0   |     0   |    0   |     6   | exists,up |
3 C: s0 ]' w! ~: d- `4 l- Z7 s8 e| 18 | compute05 | 5745M | 7446G |    0   |  2457k  |    2   |   183   | exists,up |8 d5 s" t& q% c5 o5 p' {/ z
| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |) P- w. _  K. |. y9 T
| 20 | compute06 | 6351M | 7445G |    0   |  2457k  |    4   |    94   | exists,up |
0 b1 q* w0 Z6 x) z6 {& F$ N& s# Z2 ?+ R| 21 | compute06 | 6109M | 7446G |    0   |     0   |    0   |     0   | exists,up |2 U9 Z9 O" X" }0 [/ V
| 22 | compute06 | 5575M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |+ P" E' M7 Z; u
| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |- z) G2 _0 i! b
| 24 | compute07 | 5738M | 7446G |    0   |     0   |    0   |     0   | exists,up |" s2 P: J  [3 Z( V
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |: y0 C% E/ Y; t
| 26 | compute08 | 5060M | 7447G |    0   |     0   |    0   |     0   | exists,up |+ ^" n# K. D' ]( r/ Y! `
| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
% n; p1 s$ F$ \5 p9 q# f| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
3 m8 K* [2 u& G) @+ i" j| 29 | compute09 | 5417M | 7446G |    0   |   819k  |    0   |     0   | exists,up |' O' A& d1 O6 L3 b
| 30 | compute09 | 5464M | 7446G |    0   |  1638k  |    1   |    39   | exists,up |( E: I1 Q( s& H. v: i8 h
| 31 | compute09 | 5280M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
% V: y3 a6 ~9 ?/ I- T+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
5 ~* c6 c0 Z  }0 w2 Q) d[root@compute01 ~]# ceph osd status  
7 Q+ D- m9 \* w% {5 z) E+----+-----------+-------+-------+--------+---------+--------+---------+-----------+: I  ^% R+ [. X' D$ E' D$ B  l0 ]
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |7 P% N, w  s' r/ e4 x* H' n, k
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+# f2 ?# X: q3 G3 K6 N1 h
| 0  | compute01 | 16.1G |  878G |    0   |   819   |    0   |     0   | exists,up |
0 o! `  m( b! `' ]: {1 R6 I" w; e| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |0 d$ F* _; Q% H0 w' w/ f/ _4 ^
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
/ }/ H8 l1 U" o! W| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |* X! l5 E0 H& J
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
" F; |  t" f* j+ G| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
& ~; Z# F8 i% T9 K| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |
9 e8 q, X0 q8 g2 T; r$ |% Q| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |9 n4 j' ]6 M# G' p$ X- z# O
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   33   |   798   | exists,up |3 P9 f5 {* `' z8 ?# ~
| 9  | compute01 | 58.2G |  500G |    1   |  90.7k  |    3   |    72   | exists,up |8 _  b0 h; Q6 h5 Y
| 10 | compute02 | 60.4G |  498G |    3   |  28.8k  |   14   |   272   | exists,up |
/ N% b2 h6 c! X+ Q! T* a, Q| 11 | compute03 | 57.8G |  501G |   13   |   223k  |   32   |  1275   | exists,up |3 A# s, v/ N  }6 o4 N  K6 ~; @
| 12 | compute01 |  269G | 1966G |  210   |  3195k  |   44   |   842   | exists,up |! \& c* |4 _7 ?# y, @$ a
| 13 | compute02 |  269G | 1966G |  185   |  3461k  |   68   |  3538   | exists,up |
% Z2 y4 v) \+ e2 N7 x7 u| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
3 d$ }8 z2 C3 C5 F' v| 15 | compute04 | 5448M | 7446G |    0   |  2457k  |    0   |     0   | exists,up |
" \& m7 o7 ?7 @& l| 16 | compute04 | 5581M | 7446G |    0   |     0   |    0   |     0   | exists,up |1 P, j/ r" c% b
| 17 | compute05 | 4901M | 7447G |    0   |   204   |    0   |     0   | exists,up |
' t9 K% J; N" P3 i& Q6 e4 {+ U- z| 18 | compute05 | 5745M | 7446G |    0   |   102   |    0   |     0   | exists,up |
+ B3 S$ k6 x2 }2 y2 Q| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |
# }) d% v3 p  o: O' D6 X. U% k. ~| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |" U, a7 l5 G( c- R( l5 ]
| 21 | compute06 | 6121M | 7446G |    0   |     0   |    0   |     0   | exists,up |! b# \# o$ X: p" g& H  c- d
| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
! E1 E$ @7 u) v3 R/ H- a8 Z4 w5 J5 {0 z| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |- n$ P6 z3 K  Z0 R: ]1 n; `* S
| 24 | compute07 | 5738M | 7446G |    0   |     0   |    0   |     0   | exists,up |! p/ n' `$ c* G- R% u5 y
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |2 V2 J. H* s. U4 [
| 26 | compute08 | 5060M | 7447G |    0   |     0   |    0   |     0   | exists,up |
, e7 u8 p& W0 D# C9 X| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
  a5 Q, X" ^/ A. ]- t" Q| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
. \2 `- y2 Q% z, Z| 29 | compute09 | 5417M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
6 ?- Y/ z1 P; R4 p+ m6 F1 G9 o| 30 | compute09 | 5464M | 7446G |    0   |  1638k  |    1   |    39   | exists,up |- K7 U5 ^! d' y; {4 ]  r
| 31 | compute09 | 5280M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
$ _) q. @3 B. e! V8 e+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
( G& r5 Q$ o7 X9 j* E3 ?, R* g[root@compute01 ~]# ceph osd status  
8 \2 T' L, a& R5 \  \+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
& X7 q3 K# c! P+ a7 B* x# B| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
0 i. W: F" n" }( x) z+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
' [; w/ l& L* v, p. I| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |
' z$ Q' E  X* H8 t" M, o| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
5 M8 M8 ^: v6 U- D( O| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |9 L4 n) M  Q. p+ l" `& V
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
4 O" B) k  O7 ~8 b. N2 p) g| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
( W' {* j% t  _2 c5 i| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |% j* }6 C( u- z% Z: X3 B
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |
# J4 b5 D+ n! q| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
: S- i3 l8 \9 d# m| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |0 ]( {4 g+ q9 W+ D8 F( K2 _
| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |
$ o' o# X  d% V5 Z. t8 x| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |
! o2 O6 c& j' @2 k: z| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |% M. E( w# s4 Y4 M
| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |0 Z8 s& X! H) z. }3 J3 F* L
| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |+ L+ c9 j5 w4 @$ J# t8 J
| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
5 |3 d  h- Q% n! _| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
. ^' t) U: g/ O& j+ [( i| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
6 T8 {4 c5 y. P0 {+ r& A" O( p| 17 | compute05 | 4905M | 7447G |    0   |   204   |    0   |     0   | exists,up |! Y7 k8 q; d8 t
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |
; J8 C1 _" ]+ p' E, ~+ B% t| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |7 T3 D- U& J5 s0 x% h, i3 p- B
| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |& }  N' I8 }/ [5 I
| 21 | compute06 | 6121M | 7446G |    0   |     0   |    0   |     0   | exists,up |
% O% E8 L6 e' [$ Y5 J% H| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |  Y* @8 ~3 K2 V8 X/ i
| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |% F) b. i% p& f% p
| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |. @) ^' c# `5 B9 v/ n
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
7 E: |+ b2 w: F  N2 n| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |, o! A! @' k) U
| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
  ~+ c. e# ]' d7 W7 q| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |* w% f% Y- B1 D- ]; S) t
| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |3 d# y0 C1 o6 O
| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
  }: V0 o! Q6 t7 J% t| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |/ E8 s$ }/ z- a! h8 \% D
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+6 e6 E) N2 R6 j6 `. g, s, b- V
[root@compute01 ~]# ceph osd status  ( |# }3 Z4 e3 c1 k
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
( o1 x" {7 |' C) k# x0 x  B| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |4 g; u! I0 k4 T* [
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
( {0 B! @& J5 i8 l| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |
3 o& [7 x" I; u3 N! l& \. Z3 c| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
! x: H) F* R+ S; C" ^4 R| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
% B. f, ?  b& R" t| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |# ]0 \8 M+ Y7 z+ x1 N, _% d
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |' L) w7 Q6 F* k1 x
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
  w$ T$ G, `  e2 U. \  A$ ^| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |/ {5 z! P% v; Z1 }/ u
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |* j  `1 b2 v* L) C* a8 w
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |& k0 X) b( ?) E9 R4 T8 ~& l
| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |) N( Z) k  F( O9 K' ]2 j
| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |
& n7 H! @# q8 L7 j8 X| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |" n8 \$ t0 ?* O' C+ c
| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |
; @# [5 u' x! _* y' l| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |0 ~  \( ]. R1 ?7 i4 k
| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |6 S( }- `" Q3 D8 p7 k8 H: ^0 B
| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
5 u' |( T5 M, x& c- E| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
2 K; Y) s- x" F( w7 M; Y| 17 | compute05 | 4905M | 7447G |    0   |   204   |    0   |     0   | exists,up |
8 @9 a2 Z& g  m| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |8 F& n# u! ?7 ^
| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |$ p3 g0 ^% X  F; l* S* e
| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
3 G: v3 W( ]& t( Q; W| 21 | compute06 | 6121M | 7446G |    0   |  1638k  |   10   |   198   | exists,up |  U1 s; i1 z+ k3 [
| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
4 ?* P* x8 \8 F4 Q; n, p* m| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |
9 g% |0 K+ w9 Y( ]| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |+ [5 g0 s3 t) w, f( d
| 25 | compute07 | 5469M | 7446G |    0   |     0   |    0   |     0   | exists,up |
5 a0 i& u* U: E6 M5 s4 c7 R# O7 N| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |: k$ z0 ^* ?. v- E7 u3 M" F2 t" X
| 27 | compute08 | 6207M | 7445G |    0   |     0   |    0   |     0   | exists,up |
* E* ?6 [9 h* ?+ v! p+ L+ K| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    1   |    20   | exists,up |4 u3 p  s2 d* Q/ x/ h; h# f* ^
| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |0 z# V$ C8 h% j6 s+ U2 h% s
| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |0 C, |( i& W. e1 Z5 B
| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |* ~: h$ C( B& W1 S
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
- Z, i* I- e: }4 R/ l4 o[root@compute01 ~]# ceph osd status  ( k- p/ d/ {) h5 ^5 w7 A8 h
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
( b4 @( w+ T% k| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
% Q( M) n1 L6 H' q8 ]0 ]; f' P9 @+----+-----------+-------+-------+--------+---------+--------+---------+-----------+1 b. ^0 P# J4 Z' Y6 I8 O- X3 ?
| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |8 k' r7 t3 `8 j
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
6 E$ f1 P0 I! i- u$ P% g! Q4 Z. r( G| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
" m3 f1 A( @1 N, p1 u" q| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |" Z/ z0 ]0 |8 i8 y
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
* b5 q& _( L$ M, l7 T| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
* _: O/ W: t& [3 T! g+ l( x+ k| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |
7 h, s  ~, x" T% n7 J/ i5 _| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
# T1 [4 }0 x) n. d$ ~! p5 Y| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |) A- Z; p+ t( Y+ w. W' {
| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |
1 C% `" C" l( W| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |$ p8 B! g0 @* W, S+ y
| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |
$ H, _1 ]9 ]6 z8 W+ @8 x& R| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |
# o7 K, L& H$ @" Z. b/ l| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |1 M4 o) C. K  k  I
| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    4   |    97   | exists,up |
, }! }9 D- K3 c| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
- J  q3 g3 g' Q1 b8 Q7 N  u  s3 \| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |6 i0 J# U" R7 f" K$ L& k: y. E3 a
| 17 | compute05 | 4905M | 7447G |    0   |  1638k  |    1   |    20   | exists,up |8 V9 F9 t, Y* W
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |- v/ ?3 H& p4 w: O/ b+ m
| 19 | compute05 | 6071M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |6 Q9 h7 L: z8 T+ a- W2 G
| 20 | compute06 | 6371M | 7445G |    0   |     0   |   12   |   283   | exists,up |
7 e5 y8 T6 z, o& w1 h) e- \| 21 | compute06 | 6137M | 7446G |    0   |  1638k  |   10   |   198   | exists,up |$ t: T; I; D& P
| 22 | compute06 | 5591M | 7446G |    0   |   819k  |    0   |     0   | exists,up |1 k" ^. \, |( r: j1 x: f
| 23 | compute07 | 5677M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |
, u* v8 v" Z3 ^  `$ d| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |9 ^* U( {9 Q$ @! C$ N5 V. b  e0 l) K
| 25 | compute07 | 5481M | 7446G |    0   |     0   |    0   |     0   | exists,up |
4 f% \; L) m4 ]| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |$ s  X. G/ D" C
| 27 | compute08 | 6211M | 7445G |    0   |     0   |    0   |     0   | exists,up |% p% \8 `7 p9 g8 ^) U+ I
| 28 | compute08 | 7146M | 7445G |    0   |   819k  |    1   |    20   | exists,up |
9 s8 a1 C* B' C: e7 G| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |" K" ]3 F7 K* @2 j+ ?
| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |" h: z6 r" y% q7 x8 Z* F/ Y  _7 D6 K
| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |0 N5 i3 ?+ W+ [  @4 L# u+ A8 g
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 00:08 , Processed in 0.019373 second(s), 23 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表