找回密码
 注册
查看: 1084|回复: 1

2 scrub errors; Possible data damage;ceph分布式存储报错解决

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-4-22 14:45:30 | 显示全部楼层 |阅读模式
2 scrub errors; Possible data damage- l. n+ x( ]5 I! G7 @
( d6 t* {) `6 ^% l
ceph health detail
7 Q; u4 L( S/ w& {" J2 X" B4 }! LHEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 14302 sec, mon.compute01 has slow ops
* R, P' y( ^5 c( e9 R8 K7 n2 w- h0 bOSD_SCRUB_ERRORS 2 scrub errors
* r/ J6 b- q0 @: b' W" Q
7 s0 [/ T0 `9 n! U# ]8 W8 a1 D1 p% f* t, F" E
HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 14302 sec, mon.compute01 has slow ops9 T: n7 ]' n) r! d
OSD_SCRUB_ERRORS 2 scrub errors+ x) d& a0 E5 E  H- Z; w) G% H1 ^
PG_DAMAGED Possible data damage: 2 pgs inconsistent0 _* u3 T, Z+ _; h' z# D. I
    pg 9.b4 is active+clean+inconsistent, acting [10,11]
6 X0 |9 p' H3 b+ b5 S4 Z    pg 9.176 is active+clean+inconsistent, acting [10,11]- S2 w, j& K( J0 ~4 f% m

! \0 Y) K/ U0 O) q" G+ Y) C找出异常的 pg,然后到对应的osd所在主机上修复。1 c- L/ X$ W9 H, L7 Z" c

, d  }( a' r& q" a[root@compute01 ~]# ceph osd find 10
" a, `+ v6 Z# [# C{0 v! M" Q! K+ U, g; X9 [
    "osd": 10,0 R& E( I8 I; x  Q
    "addrs": {% }8 ?3 h2 {5 \% U1 m. |
        "addrvec": [8 P" z2 l" y+ t, M: \1 c3 Z4 B
            {
( R3 ]4 [# r! M7 u                "type": "v2",
0 C, o9 o) O* C! g                "addr": "192.168.0.77:6804",5 W+ h4 l# w' J2 \  S5 h) _
                "nonce": 2018
. K8 g# E- a1 F' j' `. O: h            },
% _& }9 g0 Z, N6 w( y9 N) S; G            {
. z( G+ \. I5 b- v0 `9 b                "type": "v1",
7 t( r" X0 S$ j: S9 p                "addr": "192.168.0.77:6805",- D2 Z" h9 K+ z, h: m0 r
                "nonce": 2018
) n7 l2 x2 g1 l" b( c8 r3 q& p            }4 `$ {! Y, r& t/ u* e2 J7 O
        ]
+ l; ~  D/ q# s$ H% P/ T, y    },
$ g6 M3 [2 F; b/ v
7 R' e* s& W7 k7 C
) _* ~& O4 i5 A+ s  x$ ]: h3 T: ]$ J5 \
[root@compute01 ~]# ceph osd find 118 U* C! V9 `8 U& d  }$ m3 G
{
4 s7 o+ O# f4 A1 o    "osd": 11,1 R  a$ q: c  m( X1 \6 U* y) ]
    "addrs": {; @/ b5 A# E, R4 L+ C
        "addrvec": [: C, H3 D  G. b0 J, w- B
            {# f% m" k: H/ g! p* G# w
                "type": "v2",4 V. G# H$ Z; B/ |( Y
                "addr": "192.168.0.79:6800",
4 I5 G, j0 C. C                "nonce": 2194% H& i# k) C! V
            },
# Y. @9 K  v* S2 r% y/ n            {
. T: R8 |/ H& W2 ^, Y: O0 J& s5 n8 |                "type": "v1",
0 A7 \+ z9 h" D/ H1 p9 X- P                "addr": "192.168.0.79:6801",) ?  X  O( Q& u( j+ K. N) a3 u
                "nonce": 2194  e. y9 Z: x/ R. e5 |
            }
' c" ^& L: v( N, t6 h$ \        ]# {+ f$ |- S- U* E" N  j& U
    },
) N( U7 A1 u* ?5 r/ K3 E   ; x, X' p# @) j4 e* |& q
' C4 s6 j+ Y0 x3 A% b
然后到 进行修复
0 N5 e6 O) X& r* ?) z1、停止osd
  }" R9 F3 T( `systemctl stop ceph-osd@10( I/ t/ Y- x- a

9 q5 G, ]( U+ i* A4 G( w5 P% a4 @( A3 N& r8 ?2 K: P: u
2、刷入日志
8 Q& A7 }( B3 M. H& nceph-osd -i 10 --flush-journal
- M, _  l. ~3 B2 G+ c4 d, V
$ y+ q# f6 v9 J; i, m  ?2 D3、启动osd6 r9 p" A% L7 I0 c# c. @
systemctl start ceph-osd@10
& x3 ?1 x2 ~4 B! V9 ?6 g: b
9 t7 Z9 h2 k: n* E; `- r4、修复(一般不需要)) Q! |6 H: p+ U3 i" V1 @
[root@compute01 ~]# ceph health detail
! N1 X* s+ d' \  y7 w$ Y+ ^HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 15223 sec, mon.compute01 has slow ops
  B2 T& ^# x0 q9 R* T* ?3 w8 W* P8 ^OSD_SCRUB_ERRORS 2 scrub errors
5 O7 t; o% q/ ]" ^, CPG_DAMAGED Possible data damage: 2 pgs inconsistent
% j% n* ^4 ]8 d' ~5 \. k    pg 9.b4 is active+clean+inconsistent, acting [10,11]) I) t8 d( U) D6 X
    pg 9.176 is active+clean+inconsistent, acting [10,11]
1 \" Q' n: _/ J8 y4 k! F/ `  qSLOW_OPS 1 slow ops, oldest one blocked for 15223 sec, mon.compute01 has slow ops
( u# E( K" u: @0 n. |% R[root@compute01 ~]# ceph pg  repair 9.b4
# V$ T& s' s3 t9 F, j( R( Iinstructing pg 9.b4 on osd.10 to repair
" r  c+ @. g3 U1 w: G3 l& ~) t7 L# [1 z[root@compute01 ~]# ceph pg  repair 9.176$ i; [8 W" j& W! ]  L
instructing pg 9.176 on osd.10 to repair$ }( [9 d- B& @* ^" o! x. t
[root@compute01 ~]# ceph health detail
% P# p* I0 I/ HHEALTH_ERR 1 scrub errors; Possible data damage: 1 pg inconsistent; 1 slow ops, oldest one blocked for 15248 sec, mon.compute01 has slow ops) M9 e" @. {0 g- J; S6 _% K. t+ c  E
OSD_SCRUB_ERRORS 1 scrub errors
" c' Z4 y) ?: R. mPG_DAMAGED Possible data damage: 1 pg inconsistent. h) T' ?  m% g8 k* u7 r
    pg 9.176 is active+clean+inconsistent, acting [10,11]1 ]$ `. A2 k  v( H: s2 g1 P
SLOW_OPS 1 slow ops, oldest one blocked for 15248 sec, mon.compute01 has slow ops" v2 A7 K, e; I) E! F; p

7 a  l. `  q3 F7 C0 j; `% z' E( V, Y[root@compute01 ~]# ceph pg  repair 9.1763 Z) [' i! ~0 l. }9 @! I- r
instructing pg 9.176 on osd.10 to repair$ ]/ X9 M' h" c( A+ j
0 A% B2 C6 X2 m/ f; t% \. ~* {  b

$ I2 e! R( O# C[root@compute01 ~]# ceph health detail 8 D" n6 I% R/ W
HEALTH_WARN 1 slow ops, oldest one blocked for 15428 sec, mon.compute01 has slow ops
2 E' C" \1 ~. N+ [+ b, ~SLOW_OPS 1 slow ops, oldest one blocked for 15428 sec, mon.compute01 has slow ops
) @, _/ q. J6 L
" V6 u( O  o4 ~' G; a4 z5、查看pg所在osd
) d; g5 S( i& K- l1 \! J  H8 `& g% |* T  r
( H7 W- p0 K3 t" p1 I
[root@compute01 ~]# ceph pg ls |grep 9.176/ z/ ~; w8 e. l' F
8.170      132        0         0       0 526352384          76          8 3097 active+clean    5h   5608'93397  5608:450045 [13,12]p13 [13,12]p13 2022-04-21 19:13:30.921762 2022-04-21 19:13:30.921762 6 n9 {- m" u/ L% u
9.176       42        0         0       0 173498368           0          0 3053 active+clean   40s    5608'3953   5608:14566 [10,11]p10 [10,11]p10 2022-04-22 14:53:31.563896 2022-04-22 14:53:31.563896
. e9 v7 i" U3 c8 H11.21f      11        0         0       0  46137344           0          0 3132 active+clean    3h   5608'11532  5608:248817 [19,25]p19 [19,25]p19 2022-04-21 19:16:58.899176 2022-04-14 21:11:36.151702
0 g  b! `3 Q. r$ c& Q+ V
' D3 }& V: A* g2 p! ~# p
, [4 Z( d3 D7 E% v9 [7 I$ J9 ^& k1 i可以确认集群恢复OK。PG还是在 osd.10上。. |9 ?3 ?( n% \3 s9 T$ B

* e4 j$ k: h  z8 x5 {- N! D+ \# r8 \- F
  R9 a/ X5 ~2 ]2 n2 T, h" B

4 w) ~. \9 f  e
( O/ K; w/ F8 C$ j: E* O' e' i

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-4-22 14:58:06 | 显示全部楼层
[root@compute01 ~]# ceph osd status  5 d! x. }5 f+ S  q* ~& u
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
, p* a: o8 Y/ A2 t% b8 K| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
9 U- V1 T' i% M. X/ T5 L% z0 }+----+-----------+-------+-------+--------+---------+--------+---------+-----------+" \! T( f! Q. B0 p! I8 R0 y
| 0  | compute01 | 16.0G |  878G |    0   |     0   |    0   |     0   | exists,up |! S( q: T" O6 l/ g, K1 E. r
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
) o  n; r8 y5 O$ ^8 \8 C4 T3 x- K| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
7 b  ?. U* ]$ Q4 Y( z  Q| 3  | compute02 | 21.9G |  872G |    0   |   819   |    0   |     0   | exists,up |) B! I! N( Z2 F+ [
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |4 n8 E! ^1 r- @3 U' @
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |) ^% K5 ]3 j% V# d& V
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |6 w5 ~, V" c1 y7 r
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
  i* O! g& j) g7 q3 m4 \| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |
  P" t: X- C1 Q5 ^# S( B7 q4 ^) T| 9  | compute01 | 58.2G |  500G |    1   |  9216   |    2   |    36   | exists,up |* p, ]/ x6 I6 L+ J3 o8 a4 d
| 10 | compute02 | 60.4G |  498G |    4   |  35.0k  |    7   |   136   | exists,up |
& C' n9 N/ X# S$ V% [7 l| 11 | compute03 | 57.8G |  501G |   13   |  98.5k  |   17   |   637   | exists,up |
) P/ B  o% y( l' q- a| 12 | compute01 |  269G | 1966G |  188   |  2407k  |   40   |   762   | exists,up |1 ]! r- Y) `* \
| 13 | compute02 |  269G | 1966G |  102   |  2569k  |   46   |  1969   | exists,up |: ^% i7 F8 j  {; O1 |
| 14 | compute04 | 5873M | 7446G |    0   |   820k  |    0   |     0   | exists,up |
' [* i' [+ W- D* [# W9 P5 r| 15 | compute04 | 5368M | 7446G |    0   |   819k  |    0   |     0   | exists,up |. w# c+ @. x) x7 c* i
| 16 | compute04 | 5501M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
  s- j# }' ?6 ?" d| 17 | compute05 | 4821M | 7447G |    0   |   819k  |    0   |     0   | exists,up |
5 k! I6 w+ I% A( f| 18 | compute05 | 5665M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |" H, o/ m2 M% e, \
| 19 | compute05 | 5935M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |! T( p( C/ x) l( {% _: Q, l: M
| 20 | compute06 | 6255M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |: U' W, e1 s  A5 U
| 21 | compute06 | 6037M | 7446G |    0   |   822k  |    0   |     0   | exists,up |' Q) K( R: ^& y6 Y% P# g- t* z) E
| 22 | compute06 | 5503M | 7446G |    0   |  1640k  |    0   |     0   | exists,up |8 I7 e& K- i- y$ Z' h6 v  [; r
| 23 | compute07 | 5569M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
' r1 A! E6 j  T1 p5 b9 b& q, T| 24 | compute07 | 5670M | 7446G |    1   |   827k  |    0   |     0   | exists,up |# O; `' k! V/ r7 m
| 25 | compute07 | 5357M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
+ D5 J# a9 f- L! _1 b| 26 | compute08 | 4988M | 7447G |    0   |     0   |    0   |     0   | exists,up |
. K- `- C- N. c- w" {. v! r8 `5 L) f- s| 27 | compute08 | 6087M | 7446G |    0   |     0   |    0   |     0   | exists,up |+ H7 n4 n  P2 x9 X% j2 Y
| 28 | compute08 | 7006M | 7445G |    0   |  1641k  |    0   |     0   | exists,up |/ d: P) B8 z* |! L1 |* L; [! W
| 29 | compute09 | 5317M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
# }5 K, i8 e6 g9 M4 b| 30 | compute09 | 5364M | 7446G |    0   |  2460k  |    0   |     0   | exists,up |
, O) k  E3 x0 n2 l7 \+ L| 31 | compute09 | 5200M | 7446G |    0   |   819k  |    0   |     0   | exists,up |8 N) t! F$ b3 y. \3 B
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+" ]4 O* p3 S. X& f
[root@compute01 ~]# ceph osd status  ! ~1 u+ X; j: m) S8 p
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
: S( w+ U2 L/ v& U. K# F| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
/ q" J$ K/ c2 e4 `% C+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
/ T  a* J: B# Q% ]4 b" Q4 ~| 0  | compute01 | 16.1G |  878G |    0   |   819   |    0   |     0   | exists,up |7 q$ G! }! B0 i8 G( ~6 A
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
' a. L1 J5 Q# P9 f8 W' `& M" G| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |( t5 R  U9 y# u$ r
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |6 }% d) N1 E3 n( p! m' y2 i3 x
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
5 t9 N0 C3 v! s0 q5 }1 S| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
0 X% I3 m: b: x4 m7 k2 U+ K| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |0 x& e; X  k# D/ T" G7 D4 Q" U
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |! S- D" X  u$ P$ r8 Y
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   33   |   798   | exists,up |( \% b7 j) g) U6 }
| 9  | compute01 | 58.2G |  500G |    1   |  90.7k  |    3   |    72   | exists,up |" R" o0 P% F/ u$ s! b: G& ?# g
| 10 | compute02 | 60.4G |  498G |    3   |  28.8k  |   14   |   272   | exists,up |
9 y, g& p& d9 r! H: n| 11 | compute03 | 57.8G |  501G |   13   |   223k  |   32   |  1275   | exists,up |/ o& X) n& `* g2 Z( J
| 12 | compute01 |  269G | 1966G |  210   |  3195k  |   44   |   842   | exists,up |
6 O$ O$ r" ^9 t4 o| 13 | compute02 |  269G | 1966G |  185   |  3461k  |   68   |  3538   | exists,up |+ ]) E- B4 c- r* N+ [
| 14 | compute04 | 5981M | 7446G |    0   |  3276k  |    1   |    32   | exists,up |0 I; u4 E+ u2 `/ F( ^+ a
| 15 | compute04 | 5448M | 7446G |    0   |  2457k  |    0   |     0   | exists,up |( ?! c; O  ^6 B; |$ Q
| 16 | compute04 | 5581M | 7446G |    0   |     0   |    0   |     0   | exists,up |
. X! y1 A& H% @| 17 | compute05 | 4901M | 7447G |    0   |     0   |    0   |     6   | exists,up |# l2 }0 Y% E* Y# W
| 18 | compute05 | 5745M | 7446G |    0   |  2457k  |    2   |   183   | exists,up |
5 Q5 i. p; A2 @7 G- ^8 X! p| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |
) B5 D; a" e  F6 V7 j| 20 | compute06 | 6351M | 7445G |    0   |  2457k  |    4   |    94   | exists,up |9 |! a  ]* E; q6 A' E" T" P
| 21 | compute06 | 6109M | 7446G |    0   |     0   |    0   |     0   | exists,up |
: a2 V( R5 E) s# v9 T| 22 | compute06 | 5575M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |6 q' u9 t9 g$ Q% v+ r
| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |! l4 i. M) T3 z/ {$ x7 g6 d5 L
| 24 | compute07 | 5738M | 7446G |    0   |     0   |    0   |     0   | exists,up |
$ v( Q" j/ y' R| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |( T: I" E1 @2 w' I
| 26 | compute08 | 5060M | 7447G |    0   |     0   |    0   |     0   | exists,up |; q" r$ Y/ b3 V& Q
| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
$ j0 r3 ?8 c+ `% C& S$ `| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
6 F! c0 }5 @: ]" Q| 29 | compute09 | 5417M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
  b, Y, W: e& F- ]( \: Z| 30 | compute09 | 5464M | 7446G |    0   |  1638k  |    1   |    39   | exists,up |
/ m( {  h6 a6 e+ j/ J# C( }7 o| 31 | compute09 | 5280M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
% s) S1 _6 u/ L# G+----+-----------+-------+-------+--------+---------+--------+---------+-----------+& p. c+ C1 k$ h% Z7 Q- Y  W
[root@compute01 ~]# ceph osd status  ! @$ y- T) M- |4 ~/ X  p9 X
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+$ O$ B3 r( U& d
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
# N6 A( `1 W" R0 |1 k5 q8 |+----+-----------+-------+-------+--------+---------+--------+---------+-----------+1 b2 e  Z5 ~! D* r  r: O
| 0  | compute01 | 16.1G |  878G |    0   |   819   |    0   |     0   | exists,up |( ]" r! a/ N3 v) M& F" x' O
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |1 u0 x( C, a1 J+ k' m) [! Z
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
2 p' }, {7 f" O( F% D  R1 H! m9 t| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
# G# H$ F7 ~7 T0 V- }6 P| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
) z3 V7 N6 S7 F( T# {| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
6 l  y" Z- Z# |# L- d| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |$ z; d$ z* A2 ]! X! @# [+ g2 F
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
8 k$ ]1 u. S3 l5 i| 8  | compute03 | 20.4G |  426G |    0   |     0   |   33   |   798   | exists,up |; \& a  Z5 z$ O
| 9  | compute01 | 58.2G |  500G |    1   |  90.7k  |    3   |    72   | exists,up |
6 f! N/ @8 ?# N' Y  F| 10 | compute02 | 60.4G |  498G |    3   |  28.8k  |   14   |   272   | exists,up |  R+ v/ k: i9 r4 F, t4 K
| 11 | compute03 | 57.8G |  501G |   13   |   223k  |   32   |  1275   | exists,up |: I" u- _$ V, f, A7 P
| 12 | compute01 |  269G | 1966G |  210   |  3195k  |   44   |   842   | exists,up |. J" @* L7 k$ B* e# N+ c* `
| 13 | compute02 |  269G | 1966G |  185   |  3461k  |   68   |  3538   | exists,up |
+ z; D# n1 _/ `$ d/ E| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |* ^! x' j) m% p7 {. E3 z- }
| 15 | compute04 | 5448M | 7446G |    0   |  2457k  |    0   |     0   | exists,up |
* E6 O% ]7 _+ W0 ?8 ^| 16 | compute04 | 5581M | 7446G |    0   |     0   |    0   |     0   | exists,up |
6 y# O) J0 F( T2 U7 T& e| 17 | compute05 | 4901M | 7447G |    0   |   204   |    0   |     0   | exists,up |0 n: g2 z) S4 r5 W
| 18 | compute05 | 5745M | 7446G |    0   |   102   |    0   |     0   | exists,up |
' u) g4 @) {- H, N/ p| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |
# j) }* S# A1 d1 R8 D' a| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
- P2 ^- l/ D4 E| 21 | compute06 | 6121M | 7446G |    0   |     0   |    0   |     0   | exists,up |: i2 R! O! s, |
| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
- j% A! `/ \, S0 I| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |" {! \5 Q7 r1 j9 ^0 K' p8 y
| 24 | compute07 | 5738M | 7446G |    0   |     0   |    0   |     0   | exists,up |7 M) B* r! z. P
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |" r. T& A0 H# ^- @9 F: ]$ A" I
| 26 | compute08 | 5060M | 7447G |    0   |     0   |    0   |     0   | exists,up |
5 x$ F5 \! J3 r8 W5 |9 q  T| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
7 y; ^5 ]# ]) H) e) {5 Z| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
7 `) O3 z' m; {4 e5 ^2 i- C| 29 | compute09 | 5417M | 7446G |    0   |   819k  |    0   |     0   | exists,up |* E' H3 R! {/ Q  _
| 30 | compute09 | 5464M | 7446G |    0   |  1638k  |    1   |    39   | exists,up |
3 t; i0 }1 E9 k| 31 | compute09 | 5280M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
: N9 [2 M) A$ Z6 p) {$ ?( |+----+-----------+-------+-------+--------+---------+--------+---------+-----------+4 y4 R& k' J0 g  _2 d
[root@compute01 ~]# ceph osd status  / E% f5 e7 t, X0 F3 c6 c
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+- {: C# r( d, }! l9 D7 y- p7 @
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |- D: w& _' Q; s& L
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
$ S3 z+ q; _6 D| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |  Z# Z: q; \" ^: d9 ]1 K" Y: a
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |* b. ]5 K7 H2 N# G1 L* {0 q
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |  ?0 O: l1 L6 C1 t
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
% Z3 Q9 h% f* @( r9 U3 i. V| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |2 w' Q0 `' ^. l
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |2 J; j) S" I( }8 t6 f
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |! G; d- k9 g6 l! R# o' I
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |2 N/ f/ Q5 E/ G% E9 U, k
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |
+ i" p* s9 }9 ?* t! i3 `' h| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |6 l; H- V/ Y5 h" P& j
| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |
# o  F: x& K  g4 a1 J; ^2 C| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |1 W& X2 L" W6 l- p' Y
| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |# N0 Q; T: C: @2 n+ ^& E# s
| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |
! [$ X7 I/ B, x% J' U| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
: A3 k3 y1 \! R) g+ i) n| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |/ a/ p4 K  Q& v( n  Q3 E' J
| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
7 `# I# `3 V$ n1 S! y6 s| 17 | compute05 | 4905M | 7447G |    0   |   204   |    0   |     0   | exists,up |
# o7 a; W" {, K3 V' m| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |
! n4 K3 l. T# E5 y, t| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |
* w( h. q$ Y# ^+ K9 u6 v5 U| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
) K6 l; w2 Z  n5 W. D| 21 | compute06 | 6121M | 7446G |    0   |     0   |    0   |     0   | exists,up |
* S/ I& q7 Y; d) D4 I6 H| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
" g1 ]  i* M$ R% J| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
' L1 _4 Q1 }2 a6 R# b# y3 h| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
/ J% i2 F9 e" X% A& |& \0 W! n| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |3 K: O1 Q/ E1 k: N6 {+ N
| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |3 J$ e5 R9 `6 l  S+ u7 f
| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
6 o/ k8 U3 g% E- ~* n| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
' D. B3 O& s- l. W1 s| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |$ D; I* C% D0 y% R) T' O* o
| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
. W! J# E# w' Y+ k0 T8 p| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
7 s  [& w+ c: q% Q# p( ]3 I! C4 h2 @+----+-----------+-------+-------+--------+---------+--------+---------+-----------+, n3 C% Z3 Z3 l# H
[root@compute01 ~]# ceph osd status  & I3 T: s! Y3 j4 ^
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
" f& u0 i+ o: H% H9 B| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
' i- i% R6 N; n- J5 `7 D# T+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
1 p% O2 k. N9 C+ \" ]: P3 S1 e| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |6 O2 Q9 n. b/ H$ g" ]. s" p# @
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |" I$ X6 n, E. g: P
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |; G6 j" ?2 V/ f- B& z( e: Z  b
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |6 b/ v2 {- C, ^/ I
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
6 b& a) r& Z2 L| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
, `+ r% |" x& `& y5 W8 a| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |/ A  P7 h% p/ Y( P8 M
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
3 D" c0 d& [  G' v| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |# V0 S1 j) @# M
| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |7 X" X, k5 h/ e4 E9 l0 x8 q0 E$ |
| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |
3 H, [* @6 C) ~6 G& \; N9 W/ u0 ~| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |. F3 r& ]. I9 N7 x) d
| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |
" B) N9 C, I0 r) p5 v1 j, d| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |
6 f$ ]; u4 g7 m$ w# @| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
0 A: t8 Y9 h" Y* ]' ?| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |* e- D7 D  G( k
| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
9 Q0 Z- @0 K6 c$ M( e  o| 17 | compute05 | 4905M | 7447G |    0   |   204   |    0   |     0   | exists,up |& l6 \& x" l9 V  [+ a, L
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |
" i9 ]: x- a! [- o4 n% P| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |5 ^9 }2 C' K: s# p+ s
| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
3 A  [5 u/ B9 m9 D| 21 | compute06 | 6121M | 7446G |    0   |  1638k  |   10   |   198   | exists,up |
( d8 ~* Z! F3 N- g" R| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |9 Z+ k, \4 V9 h6 |# V6 b: N; p; k
| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |
3 B: G) F( x! n% ~, Q$ o1 `$ `| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
; x8 q, x, x/ ]7 E$ A| 25 | compute07 | 5469M | 7446G |    0   |     0   |    0   |     0   | exists,up |0 U& t, R7 C& \( c6 X5 U/ s0 G3 V, i1 n
| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |: j8 \8 i; ~1 y9 M5 R
| 27 | compute08 | 6207M | 7445G |    0   |     0   |    0   |     0   | exists,up |- Q  r- Y4 \( J4 \$ t
| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    1   |    20   | exists,up |, W7 H( k3 L% t5 X
| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |
% K7 J9 m7 J+ R) `| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
" j0 o3 e4 W* A, l3 Y| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
- p* C: S! D) E# D' _$ {  \, T" z+----+-----------+-------+-------+--------+---------+--------+---------+-----------+% v4 H7 q8 _" S; F
[root@compute01 ~]# ceph osd status  
) ^5 a! T9 D0 H" _" e+----+-----------+-------+-------+--------+---------+--------+---------+-----------+) |# }" V: i9 Q! @7 s
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
9 u6 M; ^' y! A+ T+ N2 Y+----+-----------+-------+-------+--------+---------+--------+---------+-----------+& Z+ e! C; i: X( j( L
| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |6 h) i1 K" U2 M
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |; g2 f7 `9 X8 }
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
+ C# N9 h) B# O* R/ u+ y| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |) N4 p% e7 q- x0 _
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |+ [6 R9 I4 \# Z: R7 M# i
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |; ]* c; c8 A7 C) P! D- v2 s
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |
' J5 B$ `0 Q( o4 u4 A| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
2 T3 r# `5 w  Z7 x2 i$ n/ G3 ]| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |' f5 U2 H' F5 q1 c3 M! ~
| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |2 N- z  \' @7 f% ?' [8 Z3 R
| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |
3 X  s! M$ @2 A; |4 O| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |
0 b, ^3 l- k8 P, i0 A  g! p| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |
9 n6 F5 f! Y" P% R, J| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |
1 c7 D4 k% Y5 H. h7 J6 ?| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    4   |    97   | exists,up |4 X; j. m: L5 i$ A- f
| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |, o( v7 @$ `, G3 C0 o1 l
| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |# ?" C' P* f% A  {3 }
| 17 | compute05 | 4905M | 7447G |    0   |  1638k  |    1   |    20   | exists,up |5 {: U8 P6 P  x7 q; _2 D' j4 ^; j+ d
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |
3 Z0 W7 n0 ~: g0 `| 19 | compute05 | 6071M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |, x! Z6 p0 i" m
| 20 | compute06 | 6371M | 7445G |    0   |     0   |   12   |   283   | exists,up |
6 y1 \& i2 L+ w) [/ K( {8 I, o| 21 | compute06 | 6137M | 7446G |    0   |  1638k  |   10   |   198   | exists,up |! H3 W& b" G6 D! b* Q7 X$ P
| 22 | compute06 | 5591M | 7446G |    0   |   819k  |    0   |     0   | exists,up |0 g% V# W+ O* O6 F$ K4 p
| 23 | compute07 | 5677M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |; u, s5 m8 u7 X- o; S; ]5 j) o2 J! J  v
| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |0 i  W7 m. M7 _% I2 }  Z2 C
| 25 | compute07 | 5481M | 7446G |    0   |     0   |    0   |     0   | exists,up |# E! Z+ k# e2 Q  i, Z
| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |
/ r# @# c' B: i- _) y| 27 | compute08 | 6211M | 7445G |    0   |     0   |    0   |     0   | exists,up |
4 j) J* Q. {  E0 e- y: Y9 y| 28 | compute08 | 7146M | 7445G |    0   |   819k  |    1   |    20   | exists,up |$ ?$ \/ p, X% h: L- B% ^
| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |
* E2 O; m2 E7 s4 c  Q  i| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
3 x. t5 Z3 L: Y$ `, C$ L| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |# @3 `/ {1 v6 R. l
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 00:59 , Processed in 0.050378 second(s), 23 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表