找回密码
 注册
查看: 17|回复: 0

ceph 分布式存储出现告警 22 pgs not deep-scrubbed in time 解决办法:

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2024-10-19 05:00:07 | 显示全部楼层 |阅读模式
$ ceph -s- ~; E" s& Q  a. i/ i
  cluster:
/ m- m7 S7 q# i% j* Z! s8 e/ R+ H    id:     ce68aab8-8f46-11ed-88c0-ac1f6b3a30b99 F8 m! M! ~8 q  a
    health: HEALTH_ERR7 c& Q: \8 E' n
            3 failed cephadm daemon(s)- f& Z/ Z) [$ K4 [4 Z
            failed to probe daemons or devices
' c- Y  x/ s' V: M            2 mgr modules have failed$ [6 P4 b2 y8 f  n! U
            mon gm268-1 is low on available space  S/ A* {9 z, c
            22 pgs not deep-scrubbed in time, n, \) i/ i0 I) ]5 Q0 c! E
            1 slow ops, oldest one blocked for 5580 sec, mon.gm268-3 has slow ops
, m, x* Y  Q1 ^. m+ S
, h. Z4 Z7 P  M: }+ ]. J  services:! C9 x3 Z$ F9 v  P. X- t2 o
    mon: 3 daemons, quorum gm268-2,gm268-3,gm268-1 (age 86m)
5 d# z2 D% y" H% b$ N    mgr: gm268-2.zttohs(active, since 97m), standbys: gm268-3.sjagqo, gm268-1.jgdvxs7 W1 l! L6 F7 v5 D. O* |
    mds: cephfs:1 {0=cephfs.gm268-3.ppyjrl=up:active} 1 up:standby
. Q7 |$ M/ {$ I    osd: 41 osds: 41 up (since 93m), 41 in (since 21h); 182 remapped pgs) E1 _/ o+ K' X2 n( S

7 K1 b' _1 R3 m0 [2 H  data:8 L0 W/ ^" E& V5 U, S7 z& m6 V
    pools:   5 pools, 11265 pgs
2 A# i) [% X$ Q1 j  L4 ~* F. N5 Z6 |    objects: 42.48M objects, 115 TiB* ]8 d8 q1 O0 x
    usage:   232 TiB used, 365 TiB / 597 TiB avail% g9 y2 f" A/ I& k1 I! C8 R
    pgs:     785971/84967110 objects misplaced (0.925%)
+ L& O& ?6 c+ j4 u1 e             11083 active+clean! M, m2 d, J6 h& _5 D
             181   active+remapped+backfill_wait% w; \- J; b7 D6 [% Z/ B" V
             1     active+remapped+backfilling
9 Q3 m+ y* ]% `# C7 I
1 W7 v. v6 }6 j" c( Q% S6 f5 d  io:
. K6 ~8 }/ z! p/ X% J& l0 J* q    recovery: 20 MiB/s, 6 objects/s2 f  u# j. w1 b, Q" F- j% _
4 n6 V: |7 I) g$ N3 n( }* p
解决办法:" i1 K! ?( w" l7 ]& C  p
9 c. q  f+ U9 Q8 p
$ ceph config set global osd_deep_scrub_interval 3628800
) P7 g0 E' z* v
) f3 w- }; N0 j; Z( Q' a  Q7 W' N0 @- E+ j% Q
$ ceph config get  mon & Z& \9 H  M. D
WHO     MASK  LEVEL     OPTION                                 VALUE                  RO& [, q$ H9 H3 k+ b2 l8 l5 ^8 N
mon           advanced  auth_allow_insecure_global_id_reclaim  false                    
( |6 P- }/ X# Mglobal        basic     container_image                        quay.io/ceph/ceph:v15  *
, b  s7 R3 r( b6 B' ^global        advanced  mon_max_pg_per_osd                     800                     
! W0 R: t( q- W; h' ]$ Wglobal        advanced  osd_deep_scrub_interval                3628800.000000           , \- G2 l  a, M/ Y
global        advanced  osd_pool_default_pg_autoscale_mode     off                     
& ~7 K/ w& e7 f1 C* `4 Emon           advanced  public_network                         10.12.0.0/15           *
" A& q% G: ]' U1 d% y$ C& m7 B/ S! N. E3 h

# x/ K! W' f. ^$ ceph config get  osd& d- w9 ^: {/ ^$ _8 k
WHO     MASK  LEVEL     OPTION                              VALUE                  RO
% W5 y! w/ p. p% M4 x# qglobal        basic     container_image                     quay.io/ceph/ceph:v15  * / I* \+ y5 \+ m" T0 [7 R3 H6 G
global        advanced  mon_max_pg_per_osd                  800                      3 F. l" v$ J5 _) j& \
global        advanced  osd_deep_scrub_interval             3628800.000000           
& t6 y3 ], u2 A5 N/ B9 oglobal        advanced  osd_pool_default_pg_autoscale_mode  off                     
2 b$ V0 {, |* `' b' t' o! m
0 O' p& k' L( [5 R/ w" Q& ?
4 O' s) E$ W% p+ V3 J- ], T$ d$ ceph -s0 e. L8 V! e' P* @8 U
  cluster:+ s8 I( I- N0 }7 x8 v/ j
    id:     ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9
# G; b  A' p( L/ }9 s    health: HEALTH_ERR
. Y( ?  Q; T1 I0 T2 `( n, i            3 failed cephadm daemon(s)
* H8 P! v, n3 A' d            failed to probe daemons or devices
, ^8 m* G9 E8 b# Q! E            2 mgr modules have failed
/ l* s# x; Q. L/ \            mon gm268-1 is low on available space
- `& e# [8 f$ S            1 slow ops, oldest one blocked for 5791 sec, mon.gm268-3 has slow ops" D0 y$ p8 J; o

4 ~" R" h) [6 Y; T2 r  services:9 n; z$ g& w: D  A: g
    mon: 3 daemons, quorum gm268-2,gm268-3,gm268-1 (age 89m)
% U, e6 {7 Y& D2 Y( O3 l* e% ~    mgr: gm268-2.zttohs(active, since 100m), standbys: gm268-3.sjagqo, gm268-1.jgdvxs
/ h& `5 I7 s$ G/ ?9 Y% M    mds: cephfs:1 {0=cephfs.gm268-3.ppyjrl=up:active} 1 up:standby
$ K/ `3 }8 a$ T$ ^% A3 m5 O7 E    osd: 41 osds: 41 up (since 96m), 41 in (since 21h); 181 remapped pgs+ y; C4 L" I! @" K) v; @
1 d& m2 q: \+ {5 E/ Z
  data:' Q, K+ f0 _7 V" Q
    pools:   5 pools, 11265 pgs# m( A' M: S- z+ P( G& W' [. N
    objects: 42.48M objects, 115 TiB
2 l% o1 q* H$ j' k+ ^2 B& o6 j    usage:   232 TiB used, 365 TiB / 597 TiB avail
( I8 |0 Q5 w: g+ F9 d4 Q4 W    pgs:     784873/84967110 objects misplaced (0.924%)1 L7 }. ~$ v) c) W( a# Y
             11084 active+clean% I! ?  C( Z0 m9 C  w! G
             180   active+remapped+backfill_wait
3 T7 e: h5 y8 k7 ?) g+ u             1     active+remapped+backfilling* k: [- k1 P" W6 A1 q5 T

+ x+ `9 x8 K" X; g: U  io:
1 Y1 C2 q2 A5 r! X5 @, V    recovery: 20 MiB/s, 6 objects/s1 E% g/ k$ D% w2 c
2 a; |. T' N8 `- r8 a; K; S, v
5 ]0 R6 M* B' t# T- c
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-11 23:04 , Processed in 0.018138 second(s), 22 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表