找回密码
 注册
查看: 601|回复: 2

ceph health stuck requests are blocked 问题总结

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-7-25 13:50:13 | 显示全部楼层 |阅读模式
购买主题 本主题需向作者支付 5 金钱 才能浏览

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:25:25 | 显示全部楼层
排查:
9 y& g! n. f6 v5 L$ T4 U- Q* H4 q# Y5 t1 e
1、通过dstat未发现有明显的瓶颈 (dstat -tndr 2)3 G/ Z5 U7 }. p; Z/ K

& V7 d3 ]3 X* a6 Q0 h; j$ |: F; F2、通过iostat也未发现有明显的瓶颈 (iostat -dx 2)
! O; l7 B% C- \3 Q, L* m9 q- ]# p7 m6 T/ b. P4 h% b
3、通过netstat也未发现存储网网卡的发送队列或者接收队列有明显的积压 (netstat -an)  p! l) R& `& a0 J; E; b, ?

; D9 r! ?" F- Q( l" W, D: W: X- {9 I4、也未出现ceph官方解释的四种问题(设备坏掉等)
& A0 C# ^" F, {9 i7 {) n& ?6 {2 _% Q5 J7 }( ?
/ L' M) ~. Q1 {" T, V4 d

6 |9 m$ Q) D' l& Q解决:
5 i2 n; R& k* J2 B- k+ k
) P' r' [$ F) n最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。
8 e. M8 ?" N; ^9 b+ ~  A3 Z# p3 t! Y  \0 j, V: t, r7 u

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:32:09 | 显示全部楼层
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。, @/ V( H7 B' f2 Z4 \1 H* k

8 @7 z) b: V" X) G- p: P5 m ethtool -k em1
$ L; b6 S. A3 n. Q
1 Q7 S* U& X  ?5 K0 S0 H4 ~  |* l[root@compute03 ~]# ethtool -K em1 gso off$ k" z7 V0 w/ X4 E
[root@compute03 ~]# ethtool -K em1 gso on
8 g) T( C/ e8 }' O# {( _) r/ N) r9 G+ j3 p; z
- L9 {5 w6 q0 Q
[root@compute03 ~]# ethtool -k em1 , C& l. E: q6 C0 k* U2 `
Features for em1:
& U. i  w) t5 ?0 `& e( Wrx-checksumming: on6 D4 W. j  X% @+ R! A. v' V6 c
tx-checksumming: on! C7 `+ @& f' e, @: W
        tx-checksum-ipv4: on
4 u5 p; M' n: N4 R- r, j        tx-checksum-ip-generic: off [fixed]
0 d8 m  U5 _, ^, M2 F( j0 m        tx-checksum-ipv6: on
: b$ n2 r% Z7 N/ a$ `8 z        tx-checksum-fcoe-crc: off [fixed]
( Y" L! n8 u. \: ?& @6 x4 {: j        tx-checksum-sctp: off [fixed]* t* P2 h0 a9 ~0 j3 Y6 k, T
scatter-gather: on" B5 F! L  s. i) @0 O: x+ V
        tx-scatter-gather: on
- w- H9 q  ^" Q4 i7 K+ q/ {        tx-scatter-gather-fraglist: off [fixed]6 Q, y% ~. U6 F# X
tcp-segmentation-offload: on
9 O  @+ ^' f  q) t* X        tx-tcp-segmentation: on
. A& m$ p; G( n5 P  i        tx-tcp-ecn-segmentation: on( ^3 q4 ~0 u$ ]& w
        tx-tcp6-segmentation: on( o' u1 v. M$ ^6 z
        tx-tcp-mangleid-segmentation: off
  ~, b, x: R( y5 x6 Y" O$ mudp-fragmentation-offload: off [fixed]
8 Y  K0 @) c" J4 |, A' X  bgeneric-segmentation-offload: on  h  Q1 U1 y6 p9 S: y
generic-receive-offload: on
, `: P) U. h1 n7 [large-receive-offload: off [fixed]
- ?' Z& a9 w% G0 L0 Y' [rx-vlan-offload: on [fixed]
8 ?$ Y6 M. M/ B% H) V; i* Ttx-vlan-offload: on [fixed], ~" z. m2 K- H9 C3 |0 X. t4 C$ |
ntuple-filters: off [fixed]
! ~& q& ?2 h3 o5 ^% Y$ dreceive-hashing: off [fixed]
% `1 Y+ c6 N3 khighdma: on
6 L  {2 g5 J* ^rx-vlan-filter: off [fixed]
& w. ^7 o6 X$ O2 h6 h/ i1 Jvlan-challenged: off [fixed]
5 y& G& j3 A  E; h; Gtx-lockless: off [fixed]
8 d/ [( D$ G3 O1 i0 Znetns-local: off [fixed]
2 I) l4 }  J  b/ i& Itx-gso-robust: off [fixed]5 U( H+ H7 b3 M$ P5 T2 D
tx-fcoe-segmentation: off [fixed]/ b' e- k5 I) C% F: ^
tx-gre-segmentation: off [fixed]' [, h2 s. b2 f/ a
tx-ipip-segmentation: off [fixed]3 O4 m2 g; h  w# m! J
tx-sit-segmentation: off [fixed]7 x* T5 a9 E; F1 O
tx-udp_tnl-segmentation: off [fixed]
6 n$ y7 g2 f' `! ]9 pfcoe-mtu: off [fixed]
' Y0 H& f6 S3 B7 D7 F/ D; [# htx-nocache-copy: off: ]: U9 ~+ V- p
loopback: off [fixed]; [2 N! I$ Q' F1 ]
rx-fcs: off [fixed]
2 m' O" H8 N# i3 x5 b( I3 P) urx-all: off [fixed]- E9 [: Q4 ~( J
tx-vlan-stag-hw-insert: off [fixed]* m! H- Y6 Y! [
rx-vlan-stag-hw-parse: off [fixed]
: h3 A1 q1 n& c9 h0 S* urx-vlan-stag-filter: off [fixed]* ^& B6 }$ k; r) h; P" y
busy-poll: off [fixed]
+ U% n2 g' @9 J" l1 x& Ntx-gre-csum-segmentation: off [fixed]! U* `5 L9 i' F& \
tx-udp_tnl-csum-segmentation: off [fixed]# c. v6 o* S; f# y
tx-gso-partial: off [fixed]( f: k6 ?1 h3 l: m: V4 f0 h  U. E
tx-sctp-segmentation: off [fixed]7 @6 W$ T0 Z9 n6 e3 x' v9 g" W1 O
rx-gro-hw: off [fixed]
% V+ A/ p/ u1 M7 K* Ol2-fwd-offload: off [fixed]" `+ u) ^# l7 K+ m
hw-tc-offload: off [fixed]
- \' K0 p% ^. I- i2 krx-udp_tunnel-port-offload: off [fixed]
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 01:06 , Processed in 0.114474 second(s), 25 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表