浏览此站
联系我们相册切换到窄版 Language

 找回密码
 注册
易陆发现论坛»论坛 › 云计算开源区 › ceph分布式存储 › 2 scrub errors; Possible data damage;ceph分布式存储 ...
返回列表 发新帖
查看: 1083|回复: 1

2 scrub errors; Possible data damage;ceph分布式存储报错解决

[复制链接]
admin

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-4-22 14:45:30 | 显示全部楼层 |阅读模式
2 scrub errors; Possible data damage& ~) ^( s6 T' J- i1 g! B3 H# K/ S& Q

0 Y4 U5 L+ B: @ ceph health detail & C& H2 u3 w) M, _& Y+ {
HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 14302 sec, mon.compute01 has slow ops- h$ D, h" ^6 I" c# h
OSD_SCRUB_ERRORS 2 scrub errors
# e: R8 b5 H' b. N- b4 X' t0 F, k. S# c% q; p- b: z* y
6 i! W( F) Z% `& p
HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 14302 sec, mon.compute01 has slow ops
7 s/ ~8 {3 M. X" `- EOSD_SCRUB_ERRORS 2 scrub errors! Q. {. C$ F! g9 C
PG_DAMAGED Possible data damage: 2 pgs inconsistent
7 m! _4 x2 g0 @& a  D( l3 N" d. |2 ?    pg 9.b4 is active+clean+inconsistent, acting [10,11]  h( ^4 b% i: l6 T  N2 H
    pg 9.176 is active+clean+inconsistent, acting [10,11]
8 y+ n. a2 j6 R; W& a8 L# U' w1 K* v6 A  o# z( o# {& y
找出异常的 pg，然后到对应的osd所在主机上修复。
5 k$ I: V! \! X. n! g" j# R" @! G/ m. {# \% m
[root@compute01 ~]# ceph osd find 10
3 H5 ~' [. B2 Y3 I, |9 \{/ x5 T; J; }/ R4 D
    "osd": 10,
8 W5 w6 E( B8 V- T  H4 X% u+ G    "addrs": {
* G1 M! G2 W0 e" Q9 Y. y$ P        "addrvec": [
+ m% n; T, n( o# ?& P0 m            {
, h' Q7 [( ]1 d% a' A                "type": "v2",6 B3 L9 X3 H3 c8 ?- N
                "addr": "192.168.0.77:6804",
3 E5 k1 W! X% |$ a' p                "nonce": 2018
+ u& W) t) W8 w7 O6 P" X            },8 y6 c! Z, k6 T3 L$ R5 D, g
            {
( U( k. H# m) B0 L5 B                "type": "v1",6 Y% {4 \: k& e$ N
                "addr": "192.168.0.77:6805",6 l$ L2 C' D7 o0 c
                "nonce": 20182 k- q' i# [" s# [3 w" [
            }
9 ^& X( Z5 u  S- o- R  Q        ]
  N# G: B* R/ E9 e0 k0 F    },6 Y% t0 @" u7 H7 S1 {/ ]- {: y

; I( }# g* D* y; }. j3 E% ]0 W- x, {2 r. h* D# Q
8 m5 T. i7 K. B7 n: T0 M; ]& U2 c
[root@compute01 ~]# ceph osd find 11
7 p7 v' d* O3 p3 O; D{3 C* f* K0 f. E, M
    "osd": 11,
! ^5 |- c+ I* ~" E) k    "addrs": {/ x! e! T+ Z7 f4 l6 c- C
        "addrvec": [. v, j  U0 r/ x3 Z
            {
# q( V+ }- O1 b3 j4 I                "type": "v2",8 H$ i$ Z$ ~& Z/ a& {
                "addr": "192.168.0.79:6800",9 j3 Y/ O% S4 ?- |( m2 F5 C& `  u% E
                "nonce": 2194
! K5 ^  M: H  e" ~- [2 O6 O            },
) j( z1 Z" H4 v, a& i7 u7 f  ?$ |/ U            {
: [2 i" z( Q+ o/ F1 H                "type": "v1",
  D, O: {9 W% U5 A2 n* x                "addr": "192.168.0.79:6801",
# p9 A% f2 d+ Y                "nonce": 2194# c) y7 {7 m  M( k
            }, z4 `. G; Q) s) T
        ]! w/ f1 G' T3 f7 Y
    },
; r3 t0 x0 b' y& s7 ]3 ?5 B   ! L$ X: g) n* o/ ^

4 u" V* \; z! Q# G1 R  l% E/ W. ?& Q然后到 进行修复7 ?" _& J; R; N
1、停止osd# Q5 g; {. R7 ^3 X, c: W
systemctl stop ceph-osd@107 c4 k; o, }& u. c0 L( v
6 L+ p7 C# b0 H! `" }2 h

: w, \5 t& l2 i4 e, g2、刷入日志: F# B% H0 {) v% U7 F+ ~" X
ceph-osd -i 10 --flush-journal
  x3 B( F( r! |' C$ W9 @
- x0 r" P' u# Z1 [4 k: ^# g$ M3、启动osd
" r/ O9 F1 D4 Z& I' n! G0 P/ fsystemctl start ceph-osd@10* N6 {- e# Q% ~' v3 ^; L- m
$ ]* l5 l9 @2 V& Q3 \4 q& c
4、修复（一般不需要）/ {( C) \3 p) {, k& A) a
[root@compute01 ~]# ceph health detail ; a' ]6 E* ^' n# o3 e
HEALTH_ERR 2 scrub errors; Possible data damage: 2 pgs inconsistent; 1 slow ops, oldest one blocked for 15223 sec, mon.compute01 has slow ops  T: m3 |. b6 Y. j6 [; r+ i
OSD_SCRUB_ERRORS 2 scrub errors
7 D4 l8 ^  v; o$ v+ n( H9 r0 ^& L4 l# NPG_DAMAGED Possible data damage: 2 pgs inconsistent
/ {9 M4 s0 `: L6 U9 z0 @% O    pg 9.b4 is active+clean+inconsistent, acting [10,11]
: U$ i* |0 E8 Y' l9 `( r  L    pg 9.176 is active+clean+inconsistent, acting [10,11]1 y3 }) ~* `/ a% e& e8 q6 H8 y
SLOW_OPS 1 slow ops, oldest one blocked for 15223 sec, mon.compute01 has slow ops- i3 h& l8 b" m$ e! g! U
[root@compute01 ~]# ceph pg  repair 9.b44 r& R& l4 x% T# c% {) G
instructing pg 9.b4 on osd.10 to repair7 U- \, u0 I  p2 U) `3 ?3 S$ J$ o
[root@compute01 ~]# ceph pg  repair 9.176
+ V0 H3 J+ N1 N; i! ?instructing pg 9.176 on osd.10 to repair$ |( i! F5 ?/ i+ d8 a: z
[root@compute01 ~]# ceph health detail
. V$ p6 c( @1 x( k/ p# XHEALTH_ERR 1 scrub errors; Possible data damage: 1 pg inconsistent; 1 slow ops, oldest one blocked for 15248 sec, mon.compute01 has slow ops
7 d2 C: _- k5 \/ j$ {! P" R; hOSD_SCRUB_ERRORS 1 scrub errors
: n- X; l- [* q9 E, k! APG_DAMAGED Possible data damage: 1 pg inconsistent/ D8 i9 l2 L2 h  V
    pg 9.176 is active+clean+inconsistent, acting [10,11]  {2 a5 ]# b  Y) w  F8 }9 ~) J* {
SLOW_OPS 1 slow ops, oldest one blocked for 15248 sec, mon.compute01 has slow ops
" L% ?, ~- v& i% |2 P+ @( e0 a* r
[root@compute01 ~]# ceph pg  repair 9.176
5 }8 R/ j5 l4 ]# i. D6 binstructing pg 9.176 on osd.10 to repair& u; }$ O) R2 X+ D# f8 N# e

( H& W; y, Z: ^7 ?( {8 g* |
# Q6 s# w5 `, n. J' O/ d* U[root@compute01 ~]# ceph health detail
) o9 F8 G' z4 V2 x# z; iHEALTH_WARN 1 slow ops, oldest one blocked for 15428 sec, mon.compute01 has slow ops
0 b4 @9 i* V' g9 Q' k  gSLOW_OPS 1 slow ops, oldest one blocked for 15428 sec, mon.compute01 has slow ops" K( p* e3 P, G, K& W" J- ?

# b7 z* `; |+ g' @" I5、查看pg所在osd7 X4 G) O0 p, s6 l8 {

$ q7 V; Z5 {+ r7 ~. z/ z6 l( ~$ ~7 y+ o" U& _
[root@compute01 ~]# ceph pg ls |grep 9.176. k, k& X2 _" a8 F% }* x
8.170      132        0         0       0 526352384          76          8 3097 active+clean    5h   5608'93397  5608:450045 [13,12]p13 [13,12]p13 2022-04-21 19:13:30.921762 2022-04-21 19:13:30.921762 $ m  O2 }/ p$ n
9.176       42        0         0       0 173498368           0          0 3053 active+clean   40s    5608'3953   5608:14566 [10,11]p10 [10,11]p10 2022-04-22 14:53:31.563896 2022-04-22 14:53:31.563896 + V' L5 i% m$ h! q% k  r3 C& M! K+ Q
11.21f      11        0         0       0  46137344           0          0 3132 active+clean    3h   5608'11532  5608:248817 [19,25]p19 [19,25]p19 2022-04-21 19:16:58.899176 2022-04-14 21:11:36.151702 " o1 s+ {3 O6 O' A- [. H0 M
" c4 @  ~& a/ D) x
% Y) E5 j! C* f( J+ x' U
可以确认集群恢复OK。PG还是在 osd.10上。
! ^: L' |1 l9 S) T/ [- x: i" B. m8 m! Q  Q. y5 g  c$ H

0 s% }$ D$ F8 {9 `3 ^( v' h) H4 ?
$ Z3 U, I3 Y- A  x9 o+ J" X& F! _. n
* w" j# {% o! u; C0 [# d! y- n
回复

举报

admin

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-4-22 14:58:06 | 显示全部楼层
[root@compute01 ~]# ceph osd status  ( n$ w  V2 `+ R* a8 @6 o
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+, R$ {, c! M0 X% u
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
% X5 X0 M  W  o# m4 y5 i0 b+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
8 C. Z: V5 A$ e, K( [1 i% T; d1 z; F| 0  | compute01 | 16.0G |  878G |    0   |     0   |    0   |     0   | exists,up |
6 u/ A# v2 O# x* N2 z| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |- e- `- w% O+ c7 k+ D6 d$ ^
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
* e+ a$ [9 @, q| 3  | compute02 | 21.9G |  872G |    0   |   819   |    0   |     0   | exists,up |
2 m3 y: ]7 P2 q2 Z+ w| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
) U2 v, m5 Y! ~; U| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
* f( V( U6 D* U  g9 j| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |+ E% A6 i: u' J7 e* `4 A; @4 _5 g
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
$ i6 B* q6 ]; R| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |
  Y, ~& }# e  T/ N+ Q0 || 9  | compute01 | 58.2G |  500G |    1   |  9216   |    2   |    36   | exists,up |; ^% O' G9 b( ]( w+ w6 E$ Q
| 10 | compute02 | 60.4G |  498G |    4   |  35.0k  |    7   |   136   | exists,up |
& Z. o4 j( `+ b/ Y) c3 u| 11 | compute03 | 57.8G |  501G |   13   |  98.5k  |   17   |   637   | exists,up |
# i2 `" f; _$ W' s; q6 u( }| 12 | compute01 |  269G | 1966G |  188   |  2407k  |   40   |   762   | exists,up |
9 f. J; O1 u" b( H| 13 | compute02 |  269G | 1966G |  102   |  2569k  |   46   |  1969   | exists,up |
( b" v# |8 Q# L3 ]! B| 14 | compute04 | 5873M | 7446G |    0   |   820k  |    0   |     0   | exists,up |
% H7 t/ ?5 Z: t| 15 | compute04 | 5368M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
7 [$ c& x/ N% [| 16 | compute04 | 5501M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
% W8 h( a2 u8 i# O| 17 | compute05 | 4821M | 7447G |    0   |   819k  |    0   |     0   | exists,up |$ A9 g0 k: X5 V& v2 j4 @$ E
| 18 | compute05 | 5665M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
( j) J; r" q* p7 v9 M| 19 | compute05 | 5935M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
' h( N8 m* v; f3 T" y- ^| 20 | compute06 | 6255M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |2 m0 F* S/ |% V- ^( E
| 21 | compute06 | 6037M | 7446G |    0   |   822k  |    0   |     0   | exists,up |
) O0 ~' r5 b) K. }3 _| 22 | compute06 | 5503M | 7446G |    0   |  1640k  |    0   |     0   | exists,up |
8 L) [. z$ X& [1 U| 23 | compute07 | 5569M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
, c# P$ ?! u) M: p| 24 | compute07 | 5670M | 7446G |    1   |   827k  |    0   |     0   | exists,up |
0 p$ i3 [3 T5 {' Y* X2 H| 25 | compute07 | 5357M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |" A, h3 z' R  X1 \- c% A' a! }9 n
| 26 | compute08 | 4988M | 7447G |    0   |     0   |    0   |     0   | exists,up |( X7 }0 P: D. ]1 {9 ]' R
| 27 | compute08 | 6087M | 7446G |    0   |     0   |    0   |     0   | exists,up |# ?6 n9 P; @/ k( m  u& m
| 28 | compute08 | 7006M | 7445G |    0   |  1641k  |    0   |     0   | exists,up |
5 j) Z$ `# |% @* @| 29 | compute09 | 5317M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |7 B: U3 h; b) M2 Q1 }
| 30 | compute09 | 5364M | 7446G |    0   |  2460k  |    0   |     0   | exists,up |
* |1 E! c+ _) q| 31 | compute09 | 5200M | 7446G |    0   |   819k  |    0   |     0   | exists,up |8 h% m; Y  ^3 K$ ^" B/ J
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+, m2 _& `9 k; p5 V
[root@compute01 ~]# ceph osd status  
1 Y/ p! @$ Q3 |3 C" B; e5 w+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
' o/ }/ U8 S+ j# j| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |) O# Q( Z  {6 U( A- @0 k
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
: P1 j$ A( ~, Q+ z# O! G* J  j  f| 0  | compute01 | 16.1G |  878G |    0   |   819   |    0   |     0   | exists,up |/ y3 a* V9 P% A) y
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |+ a8 ^$ z# x7 n
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |9 g- F- y7 w$ F' V
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
3 n% B1 H6 B9 `# D5 c7 `| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
& _: }! I1 V% ]$ d! ]: B| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |. E, S0 D" R* S/ [+ V
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |) L: _+ q3 I8 ^: D
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |! z" ?) |1 Q. B' Q) W( Y: u
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   33   |   798   | exists,up |
0 P! d9 I( Y1 I( \+ J4 P2 E0 d| 9  | compute01 | 58.2G |  500G |    1   |  90.7k  |    3   |    72   | exists,up |
3 I; h0 {5 b. s0 t$ W$ o| 10 | compute02 | 60.4G |  498G |    3   |  28.8k  |   14   |   272   | exists,up |! b- x* t' w* l0 B% `
| 11 | compute03 | 57.8G |  501G |   13   |   223k  |   32   |  1275   | exists,up |
3 X- b$ i9 N& B| 12 | compute01 |  269G | 1966G |  210   |  3195k  |   44   |   842   | exists,up |
1 }9 X2 {$ F4 F$ C3 L. u: D| 13 | compute02 |  269G | 1966G |  185   |  3461k  |   68   |  3538   | exists,up |
! \4 w* W  i. p! t3 [| 14 | compute04 | 5981M | 7446G |    0   |  3276k  |    1   |    32   | exists,up |
& W. ?% g. G5 W4 K: i$ H| 15 | compute04 | 5448M | 7446G |    0   |  2457k  |    0   |     0   | exists,up |7 x; N3 E3 A) K0 s* f: b' N
| 16 | compute04 | 5581M | 7446G |    0   |     0   |    0   |     0   | exists,up |7 `8 w1 u0 m2 j
| 17 | compute05 | 4901M | 7447G |    0   |     0   |    0   |     6   | exists,up |
& _6 i% W9 |4 u2 @| 18 | compute05 | 5745M | 7446G |    0   |  2457k  |    2   |   183   | exists,up |
' V5 l+ g& C8 e1 S0 s" @| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |& g, k, G$ t: u) F$ x
| 20 | compute06 | 6351M | 7445G |    0   |  2457k  |    4   |    94   | exists,up |
& A) z6 x7 P% G1 D5 o1 D| 21 | compute06 | 6109M | 7446G |    0   |     0   |    0   |     0   | exists,up |* t, M& O$ C% t: \: Y
| 22 | compute06 | 5575M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |7 ?9 U2 K' s( v" @* Q1 m( y* E
| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |1 k7 F2 {9 ^* E  h7 b
| 24 | compute07 | 5738M | 7446G |    0   |     0   |    0   |     0   | exists,up |  e* N, E5 P8 \$ y' l
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
+ k' \3 u! L* Y3 u$ D| 26 | compute08 | 5060M | 7447G |    0   |     0   |    0   |     0   | exists,up |, g7 t; Z) a# z. e% P: a& c
| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
  H& Q1 m! @5 R- H8 `  y. D, W| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
5 w, Y9 S, u& w5 }- J5 e| 29 | compute09 | 5417M | 7446G |    0   |   819k  |    0   |     0   | exists,up |. W5 Q, B; O0 v$ L0 B! y$ o- Y4 K
| 30 | compute09 | 5464M | 7446G |    0   |  1638k  |    1   |    39   | exists,up |
* U+ d& P7 \9 A: w/ v2 g' d0 A0 K| 31 | compute09 | 5280M | 7446G |    0   |   819k  |    0   |     0   | exists,up |$ s0 w% d4 b& l) E! n% I
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
4 t( z5 P$ o0 w$ v& M7 K[root@compute01 ~]# ceph osd status  
3 |- }) V. J% z# f+ O+----+-----------+-------+-------+--------+---------+--------+---------+-----------+/ r$ U( X/ r  h8 k8 T* ~
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
# P4 ]  W- t/ H+ A2 k) j+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
6 P% o3 M# c9 q8 O- c# W4 C| 0  | compute01 | 16.1G |  878G |    0   |   819   |    0   |     0   | exists,up |( V. I2 V- ^/ H, J: |/ n1 V
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
: d1 H0 j5 q2 R9 @8 K) [" i| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |' `3 F  h% g! Z: ^+ c. w
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
$ j( H6 \4 p* ]7 D& v1 n# Q0 X| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
  J9 ]0 J3 K; }7 }6 ]| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |$ F- x& I* v0 I' a) |, a* F  K0 [* D
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |
" X. Y( E& j- c% {, {7 a+ z| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
) T- X9 U* p% s( W+ c| 8  | compute03 | 20.4G |  426G |    0   |     0   |   33   |   798   | exists,up |
% |) P9 ^/ K1 g( `  D: H: V) N4 K| 9  | compute01 | 58.2G |  500G |    1   |  90.7k  |    3   |    72   | exists,up |& H! j8 j) f9 a' F. Y$ d/ f
| 10 | compute02 | 60.4G |  498G |    3   |  28.8k  |   14   |   272   | exists,up |
- u. o9 S5 W0 J. P1 m7 X| 11 | compute03 | 57.8G |  501G |   13   |   223k  |   32   |  1275   | exists,up |
; v) l9 K( J, H! C| 12 | compute01 |  269G | 1966G |  210   |  3195k  |   44   |   842   | exists,up |; s$ A9 l7 r2 _# F% G0 ~
| 13 | compute02 |  269G | 1966G |  185   |  3461k  |   68   |  3538   | exists,up |
2 C) l5 |8 [, g! q8 `| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
7 A; d' K9 X- b/ h+ G% N; S; y; E| 15 | compute04 | 5448M | 7446G |    0   |  2457k  |    0   |     0   | exists,up |
; y- [# k: n+ E' T9 q& M| 16 | compute04 | 5581M | 7446G |    0   |     0   |    0   |     0   | exists,up |2 w$ o1 x* M5 E- T# N( |0 P5 e
| 17 | compute05 | 4901M | 7447G |    0   |   204   |    0   |     0   | exists,up |
. n7 h' F" T- ~  I8 i| 18 | compute05 | 5745M | 7446G |    0   |   102   |    0   |     0   | exists,up |, n6 O& Z8 E, C3 D
| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |. b. _2 P6 m/ E$ O# A0 |
| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |3 b0 H6 K( B3 U7 \% w4 _* c7 L8 w% q/ d& A
| 21 | compute06 | 6121M | 7446G |    0   |     0   |    0   |     0   | exists,up |
1 K) c2 a# K" f% X| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
- K6 }) c9 a% @3 e. ~| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
0 k  t/ u( ?$ s% W8 F! e- T7 Y* C| 24 | compute07 | 5738M | 7446G |    0   |     0   |    0   |     0   | exists,up |9 p! L# ?/ S. q- _+ s5 Y  b
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
  o2 r& D5 i* u5 {0 f5 c3 ]| 26 | compute08 | 5060M | 7447G |    0   |     0   |    0   |     0   | exists,up |
; ^6 g( {" j- R/ h, ^| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
, a9 H1 q' n# ^4 G: Z! || 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
0 L* _4 ~1 s/ i) B* x; @9 P5 r! l2 I# ~| 29 | compute09 | 5417M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
9 Y% ]& h( W& d% S( a! C% E, `+ F| 30 | compute09 | 5464M | 7446G |    0   |  1638k  |    1   |    39   | exists,up |& a9 |5 X% m  i/ M2 u9 p' O& _
| 31 | compute09 | 5280M | 7446G |    0   |   819k  |    0   |     0   | exists,up |$ l0 f7 u1 y6 _; m9 E. i$ H" j$ I
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
& j2 O( |. c, Y3 W: t/ [. U, b[root@compute01 ~]# ceph osd status  7 r- d* C# I7 o1 R' P
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
% m. C/ W$ o$ }/ E. k8 z' J* ]5 g| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |
" V8 n0 x& X  \$ l+----+-----------+-------+-------+--------+---------+--------+---------+-----------+' r2 `+ O8 H: Z) F. N
| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |
, g8 y% c) c" p5 T1 z# B' W| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |2 a9 W" r! A/ W% ?
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
  `* p2 @9 B" O  I. n5 u( R0 H| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |# }8 f6 L* I: E8 J. O
| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |9 C+ o6 k$ x0 E  k5 i
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |- W' ~* T  ]7 ]4 C
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |$ @; s. L1 o+ n( J4 C# t+ F9 m. p" C
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |
1 s) S& {* P" L* R| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |2 U  h  f. U" r. F5 x4 r
| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |
& g3 n: ]3 J' x) k' @4 i) [| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |$ ^4 _. Q* C  a+ r! |  m
| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |
1 C- U5 F4 F( q- z- g| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |# t. j$ C2 w( \0 L. q
| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |, E0 D6 i# v, a) [  P8 S
| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
! d3 u3 U/ a/ K4 N& `$ I| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
. H6 f4 K/ `, T  [' ^6 q; x0 r| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |+ c. S9 ^- h8 e6 k1 f' e" Z& g
| 17 | compute05 | 4905M | 7447G |    0   |   204   |    0   |     0   | exists,up |+ N5 ~4 K: X$ s; ^3 N0 q$ f
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |
! @, m9 E* V. U4 h1 J7 X/ l* d| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |
/ O4 [) |5 ?' {, z" `) @| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
" I) }4 |! `: s- a& W/ Z7 w| 21 | compute06 | 6121M | 7446G |    0   |     0   |    0   |     0   | exists,up |
8 S; @5 q4 q' }! P| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |0 A% ]6 d7 J1 T
| 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |4 _2 e( p) A4 c+ Y/ j( W- B6 T
| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |+ h- D3 r4 Q4 S! x4 I" o% r
| 25 | compute07 | 5469M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |, ?3 F9 W3 d$ Y
| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |
: ^$ {& l% K# {: Q! @# \| 27 | compute08 | 6207M | 7445G |    0   |  3276k  |    0   |     0   | exists,up |
9 s( y, @: _( s% R| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
' z0 ]' c, d; [/ b| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |# }; n9 k1 X; o3 v4 D$ T4 Y$ [. X% ?
| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
; c0 }  P  {0 f: l1 J: e: K| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |  B0 T2 W6 g0 R; I8 Z
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
: }; J1 A8 F  }  p[root@compute01 ~]# ceph osd status  
8 p0 O- _# {6 Q2 p: `+----+-----------+-------+-------+--------+---------+--------+---------+-----------+# q. K6 _6 l5 X6 o7 n1 X
| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |+ {8 m9 R0 P  w0 \1 ?* {
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+  V2 w& \# P) s8 y
| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |7 I8 s7 \; z0 Z* U
| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
& f) u0 {& m$ e| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |. V# i- v! D; I- u
| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
( T2 v6 [# j- @/ ^- I| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |( @$ i& t7 C2 |$ p' `7 l0 g3 C4 ?0 H
| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |
" y5 n  q: u8 I# H| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |0 W7 r# I$ e0 ?# T- \- Y
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |* t  H; T$ N/ C. Z9 t6 ~
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |
# X7 y* U1 F* N' N# c0 A" F) W| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |
2 N, u5 n2 d3 K7 x! n' }' k| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |
( F* e- x1 t# H' r| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |
. ?; c2 p  h8 g1 T' z1 N8 q| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |) U: C; a2 g3 \, S2 i6 s
| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |
# U- m9 C! t% t; b# }, @| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    0   |     0   | exists,up |; m; y- D2 |- W" t% T7 F
| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |$ m9 Q" f' @; U: l0 J& A
| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
# I1 a. w8 m- E' g# a! J| 17 | compute05 | 4905M | 7447G |    0   |   204   |    0   |     0   | exists,up |' y+ Q# r, N( [+ ~
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |& B$ D/ b7 H1 p$ o5 C& T  D
| 19 | compute05 | 6051M | 7446G |    0   |     0   |    0   |     0   | exists,up |
6 p7 R8 I& _5 Q& I3 ~" K| 20 | compute06 | 6371M | 7445G |    0   |   819k  |    0   |     0   | exists,up |
3 Q: v/ v! [6 l# a$ y& O' K7 P| 21 | compute06 | 6121M | 7446G |    0   |  1638k  |   10   |   198   | exists,up |, {6 J3 E! J. C: l: }# E
| 22 | compute06 | 5591M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
3 Y( u1 u, g) S* || 23 | compute07 | 5669M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |
2 U3 E  d. \! D# Q" s, R| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |1 \7 Y, \. p9 A$ F3 U
| 25 | compute07 | 5469M | 7446G |    0   |     0   |    0   |     0   | exists,up |
6 v, t3 g0 f4 L* ?3 h8 |* o| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |$ t+ v: V( K% V& Y5 Q, |
| 27 | compute08 | 6207M | 7445G |    0   |     0   |    0   |     0   | exists,up |1 s1 x" W) X1 F7 i% _
| 28 | compute08 | 7126M | 7445G |    0   |   819k  |    1   |    20   | exists,up |( M3 C& z& q% c; S8 }! W! G$ Y
| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |
8 y, t; D& |+ ^) G$ f| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
! B9 ~. `2 ~+ l8 |* P" w9 a% Y; Y9 d| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |5 e% x: f3 Z$ u  O
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+) [+ _5 ~2 [1 ]6 }
[root@compute01 ~]# ceph osd status  
5 e9 K' }" _: Q+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
+ k( k" f% \5 J: r+ o" t| id |    host   |  used | avail | wr ops | wr data | rd ops | rd data |   state   |5 X0 ~6 e$ P0 x' Z' l9 x' J9 T
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
' }5 I& @( I1 R& K$ I" P* C5 Y' L5 x| 0  | compute01 | 16.1G |  878G |    0   |     0   |    0   |     0   | exists,up |
( S/ F; s* ]# e4 D) N| 1  | compute01 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |, P' x; Z0 h, p8 H4 T. N; a
| 2  | compute02 | 12.8G |  881G |    0   |     0   |    0   |     0   | exists,up |
$ Z* X# d! r1 v( o4 n2 b1 t. N| 3  | compute02 | 21.9G |  872G |    0   |     0   |    0   |     0   | exists,up |
7 }8 D" Q7 |5 U5 f' [7 v- d| 4  | compute03 | 17.0G |  877G |    0   |     0   |    0   |     0   | exists,up |
3 I5 f0 _2 h$ ]9 Q" K% h3 s% k8 b| 5  | compute03 | 17.4G |  876G |    0   |     0   |    0   |     0   | exists,up |" G+ b* m. }# t( `( p7 a
| 6  | compute01 | 18.6G |  428G |    0   |     0   |    1   |    43   | exists,up |  y) T7 ^$ L* z! q
| 7  | compute02 | 21.0G |  426G |    0   |     0   |    3   |   144   | exists,up |& m5 \! M8 s: |& G
| 8  | compute03 | 20.4G |  426G |    0   |     0   |   30   |   741   | exists,up |
0 S7 o! G7 X* y* Y| 9  | compute01 | 58.2G |  500G |    1   |  15.2k  |    0   |     0   | exists,up |
# v: j. n. h. K. i7 \| 10 | compute02 | 60.4G |  498G |    2   |  20.8k  |    0   |     0   | exists,up |3 \4 Y$ X; L; l) [1 V0 x
| 11 | compute03 | 57.8G |  501G |    4   |  67.2k  |    1   |     0   | exists,up |8 O& v9 W  a% z1 [, r
| 12 | compute01 |  269G | 1966G |  112   |   960k  |   36   |   682   | exists,up |
" }3 ?( s& n; L8 k/ H" N; U| 13 | compute02 |  269G | 1966G |  128   |  2215k  |   23   |   400   | exists,up |
7 b1 U6 P* `  j9 p| 14 | compute04 | 5993M | 7446G |    0   |   819k  |    4   |    97   | exists,up |
( ?( K5 Q  G4 {: X8 X- S| 15 | compute04 | 5472M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |
( t! |* r* U; T/ C- S| 16 | compute04 | 5601M | 7446G |    0   |  3276k  |    0   |     0   | exists,up |- v0 x2 l+ U+ I& m
| 17 | compute05 | 4905M | 7447G |    0   |  1638k  |    1   |    20   | exists,up |5 X$ o2 r/ g+ W
| 18 | compute05 | 5753M | 7446G |    0   |   102   |    0   |     0   | exists,up |2 g# q. j$ ?) L# \1 t+ [
| 19 | compute05 | 6071M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |
5 ~- r: P5 u: r5 u2 L. m, q| 20 | compute06 | 6371M | 7445G |    0   |     0   |   12   |   283   | exists,up |, ~. E; U8 r3 a# V/ z6 T+ M
| 21 | compute06 | 6137M | 7446G |    0   |  1638k  |   10   |   198   | exists,up |
: O+ W( m- s7 s) Y| 22 | compute06 | 5591M | 7446G |    0   |   819k  |    0   |     0   | exists,up |
1 k- A2 ^2 s6 O5 s+ T* d| 23 | compute07 | 5677M | 7446G |    0   |  1638k  |    1   |    20   | exists,up |) Q. d3 F" Z2 R8 ]; t9 F! ^
| 24 | compute07 | 5746M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |
" ]. ?0 H$ T% p5 V& s; U1 n. || 25 | compute07 | 5481M | 7446G |    0   |     0   |    0   |     0   | exists,up |
9 j1 n0 w  V% a5 p" _, c( |$ ]| 26 | compute08 | 5072M | 7447G |    0   |   819k  |    0   |     0   | exists,up |
$ c+ ?7 d) D, m' c+ N! \4 g9 ?| 27 | compute08 | 6211M | 7445G |    0   |     0   |    0   |     0   | exists,up |7 m" v% N" V% {, ^2 O4 x- L
| 28 | compute08 | 7146M | 7445G |    0   |   819k  |    1   |    20   | exists,up |
* F" F  {* g: E| 29 | compute09 | 5441M | 7446G |    1   |  4096k  |    0   |     0   | exists,up |! E& J$ ^4 d( b7 V
| 30 | compute09 | 5472M | 7446G |    0   |  1638k  |    0   |     0   | exists,up |. n' T  o3 h! n, ~1 y  @  u
| 31 | compute09 | 5288M | 7446G |    0   |   819k  |    0   |     0   | exists,up |0 }& Y3 `$ @4 P7 H
+----+-----------+-------+-------+--------+---------+--------+---------+-----------+
回复

举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 00:56 , Processed in 0.021350 second(s), 23 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表