找回密码
 注册
查看: 599|回复: 2

ceph health stuck requests are blocked 问题总结

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-7-25 13:50:13 | 显示全部楼层 |阅读模式
购买主题 本主题需向作者支付 5 金钱 才能浏览

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:25:25 | 显示全部楼层
排查:
+ l; L5 t' {( ]4 B$ U- x% |$ d2 M; I  q3 W, p
1、通过dstat未发现有明显的瓶颈 (dstat -tndr 2)
0 q- x& a, Q1 C, W  ~* o, X9 B- ?# K  I" D% w6 ^  X7 m
2、通过iostat也未发现有明显的瓶颈 (iostat -dx 2)  b/ R7 H$ r+ L, ~) }. @& C. q. C) B
7 M- |- T  ]  K5 F  C' }% d) }
3、通过netstat也未发现存储网网卡的发送队列或者接收队列有明显的积压 (netstat -an)! A) K; z8 Q! T5 V' J' r* h

' u7 ^7 ^! q9 I+ c9 u4、也未出现ceph官方解释的四种问题(设备坏掉等)5 s( \0 h% m  C/ o2 e" t
+ h, ~5 C/ Y( U4 |  C: V1 E& Q# S/ H2 p
& v  H1 e8 Z2 b5 L: ]/ J# R7 g

# |& V) w5 I& U! T! p解决:
) C2 T. f1 n& o& {5 Q9 ~4 b( P. K5 Q7 B; F) b/ S8 P0 h
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。) O% d3 O9 l& {  w* m$ q7 P
8 @5 W1 G# ?" E7 g; a+ \" E

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:32:09 | 显示全部楼层
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。
8 ?' h- u. Y8 Y; A; ^7 x* t- h( Y- F, @0 i9 t5 A2 h
ethtool -k em1( |% \2 }8 c  R$ `1 d  K
; R1 Y% s* v" M0 v
[root@compute03 ~]# ethtool -K em1 gso off
6 M0 o0 X. o. O' f* e& t; a[root@compute03 ~]# ethtool -K em1 gso on
) E# O* C4 G1 ^% G# J4 [5 f9 y# `0 W3 B+ x' {  t1 m
" B. ]/ D7 @) t  `$ X2 ^) H
[root@compute03 ~]# ethtool -k em1 5 ]1 V. L+ ~) k  \5 f
Features for em1:
' W. X* H9 N2 w" Erx-checksumming: on  T+ o' e2 p7 g8 Z6 g) f! T9 C
tx-checksumming: on
7 B7 B5 @) F: Y9 s) Z# z5 T        tx-checksum-ipv4: on2 C& x7 `! L2 E$ f$ }
        tx-checksum-ip-generic: off [fixed]
0 [" u) K$ B& X        tx-checksum-ipv6: on  T- i# @4 I( i( R# D9 t
        tx-checksum-fcoe-crc: off [fixed]" a$ b; S4 ^) M( _1 Z# E. {
        tx-checksum-sctp: off [fixed]
/ j7 @* s9 {8 ]/ Z% \scatter-gather: on
( X4 T# V6 ~1 _: O5 O+ h5 ]        tx-scatter-gather: on' R: K' S3 O( t. U- V4 n' U
        tx-scatter-gather-fraglist: off [fixed]( J3 l0 W6 d: ?' k2 m$ i6 \
tcp-segmentation-offload: on
, m. `2 O' T8 O+ J: h9 o( D        tx-tcp-segmentation: on
& m' d) F  a8 {3 F2 m0 \* j        tx-tcp-ecn-segmentation: on5 B6 J* f! Z+ m- k( ^+ J9 }+ k
        tx-tcp6-segmentation: on
2 D7 @% m) W* E        tx-tcp-mangleid-segmentation: off
" P) a5 c9 i) f; R1 E- W3 W* h% f4 Tudp-fragmentation-offload: off [fixed]% H; \: I" U& w7 j* |$ b
generic-segmentation-offload: on
7 i7 Y' }' n" @9 p) K5 V/ zgeneric-receive-offload: on9 ?& q% {4 t- j( p- R  E
large-receive-offload: off [fixed]
. D3 a3 S9 K" `- erx-vlan-offload: on [fixed]
# U" ?7 y% a* s) L4 p. C2 y: R& Dtx-vlan-offload: on [fixed]  c4 \0 M" v0 f
ntuple-filters: off [fixed]' h; c; ]# W6 h
receive-hashing: off [fixed]: f' j; ~8 w( p- }1 z% V
highdma: on
9 z7 x4 N. ^( k' _rx-vlan-filter: off [fixed]
, Z! b* E5 r. u, L6 jvlan-challenged: off [fixed]
. X; F6 @3 w; I2 ^! @! mtx-lockless: off [fixed]
" w  |$ w: J: T5 Q( Jnetns-local: off [fixed]# ^" t# a. P$ F9 }& a. O1 y) ?
tx-gso-robust: off [fixed]
3 D$ v) A* h& @tx-fcoe-segmentation: off [fixed]
# b8 c4 A+ q/ c: F1 A6 i- ]) ^tx-gre-segmentation: off [fixed]
( a# Y' U4 I0 Ktx-ipip-segmentation: off [fixed]
2 V6 Z7 S3 i( y6 ?) ~tx-sit-segmentation: off [fixed]; G; B0 I( ^( P  t5 m' }
tx-udp_tnl-segmentation: off [fixed]
5 v1 B6 f# u9 ^6 |0 s  i& @# `fcoe-mtu: off [fixed]
" j" n9 v8 i) r/ U( b, _3 J/ xtx-nocache-copy: off) m0 d9 ^" ~! q+ R# d" P1 S
loopback: off [fixed]  ]7 ~7 {- z& x) P
rx-fcs: off [fixed]& K7 C! w+ G+ A2 V0 O3 v2 Q; }( B
rx-all: off [fixed]
% O, p5 M7 O& d7 r, l$ P5 htx-vlan-stag-hw-insert: off [fixed]
7 I9 |( ~$ j7 b0 g/ n9 lrx-vlan-stag-hw-parse: off [fixed]
8 U& [' T3 x9 T; W6 drx-vlan-stag-filter: off [fixed]
. O) ]5 C8 ]! lbusy-poll: off [fixed]/ ]6 q4 v( l+ k
tx-gre-csum-segmentation: off [fixed]
- f: q  O$ O) ~tx-udp_tnl-csum-segmentation: off [fixed]& H- V! O! L) w) h
tx-gso-partial: off [fixed]
) p! m, Y- F+ q) Mtx-sctp-segmentation: off [fixed]" H  i8 M3 O/ Z/ Z$ y$ O5 v
rx-gro-hw: off [fixed]# x' |/ T& p5 {, m2 b1 Q
l2-fwd-offload: off [fixed]& T* x- r% d) k7 d
hw-tc-offload: off [fixed]3 b6 C  [) n% s( z. s- x
rx-udp_tunnel-port-offload: off [fixed]
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-11 23:03 , Processed in 0.024711 second(s), 26 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表