找回密码
 注册
查看: 600|回复: 2

ceph health stuck requests are blocked 问题总结

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-7-25 13:50:13 | 显示全部楼层 |阅读模式
购买主题 本主题需向作者支付 5 金钱 才能浏览

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:25:25 | 显示全部楼层
排查:" r# l- V# t+ H" u8 [- P! B2 Y
; M3 @3 R2 B* L+ `0 w& a
1、通过dstat未发现有明显的瓶颈 (dstat -tndr 2)
! k0 h9 [# q. {+ e/ O7 s6 C' n1 j/ D1 P, V
2、通过iostat也未发现有明显的瓶颈 (iostat -dx 2). w( T! G* J1 Y: A( H) d& X: A% {
0 z8 h9 U( j$ T# T4 s) s
3、通过netstat也未发现存储网网卡的发送队列或者接收队列有明显的积压 (netstat -an)6 w: y$ I8 H; D  H& G! O8 M' N
% t: o. E- a& d- {6 H
4、也未出现ceph官方解释的四种问题(设备坏掉等)
. X' c. c/ Q+ _0 k! g5 C, U* \1 P) S  Z0 b7 P# A

# k" a2 D$ l. r0 [
0 U! U  o* Q  ]/ g( F解决:
; [3 S$ H: G$ J5 R# ~  D" T" x) M9 F! W- C/ E# w! F* V
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。
! c& G8 Q  m- {/ N9 z$ s5 k. @( A( \- D/ C% J; H

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:32:09 | 显示全部楼层
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。
% R0 C0 K% \. y. z1 g# y6 [% u& Z' V  \
ethtool -k em1
" u6 i8 K; |6 s! N+ g4 x0 p$ g2 T9 T7 ?! p( U
[root@compute03 ~]# ethtool -K em1 gso off
, q# O4 J" ?! K5 J' k: E( u[root@compute03 ~]# ethtool -K em1 gso on% U. z2 U6 T; n- g$ [
0 E7 e+ t) x3 f" z2 c
& d7 t$ ]: [4 `' A& e
[root@compute03 ~]# ethtool -k em1
. m" G3 }+ J9 w& k! m. Z# I6 cFeatures for em1:) A: \: h9 H+ M4 ^( a7 K* O
rx-checksumming: on- u0 Z& ?0 o3 d3 ]5 g
tx-checksumming: on0 \9 S3 _- E& c$ E- ]& I8 L6 L
        tx-checksum-ipv4: on
# t- p) ?/ D. Q( G+ i  C8 b        tx-checksum-ip-generic: off [fixed]. o  }+ ~. {- I" `
        tx-checksum-ipv6: on+ L. T  s% F3 k1 e; s
        tx-checksum-fcoe-crc: off [fixed]
1 _  ^2 y; d' B( k5 G! u+ H        tx-checksum-sctp: off [fixed]
: S- k/ r8 j2 h, n4 dscatter-gather: on$ a: L0 `5 J) g  g0 J0 P3 s
        tx-scatter-gather: on
4 x& C' S) I6 w! s. q. r        tx-scatter-gather-fraglist: off [fixed]3 P1 [+ I; V/ i! f/ x; N1 G$ c0 {
tcp-segmentation-offload: on$ u9 q% u6 T5 B8 B4 i
        tx-tcp-segmentation: on
$ M6 `+ ?# J0 J9 s        tx-tcp-ecn-segmentation: on
7 w" i* S9 f& n* [. s* |( Z0 t        tx-tcp6-segmentation: on
1 E' f& {" X( }1 J) d        tx-tcp-mangleid-segmentation: off
4 D) Y: f: |! [0 F. U: u4 g6 Iudp-fragmentation-offload: off [fixed]# V# W; ^# b! B! C  Z
generic-segmentation-offload: on
# X: {7 K' M2 Q. |3 D! ~( l$ Fgeneric-receive-offload: on* Z7 W' N% p) V6 r& p" G' P1 e7 R
large-receive-offload: off [fixed]
9 \! H4 c( k/ r& y, X1 prx-vlan-offload: on [fixed]* d' o, u% ]4 ^& |$ L7 F2 _" n
tx-vlan-offload: on [fixed]
7 B9 ^6 b+ O  L- Pntuple-filters: off [fixed]1 J* x  f, L# Y/ l
receive-hashing: off [fixed]
% n9 `+ Q( d- a; s( Chighdma: on
4 L2 o$ y3 E) T4 v; `! G5 Irx-vlan-filter: off [fixed]
* x" w- e8 R  `4 m. U) L7 Y: a+ D- Ovlan-challenged: off [fixed]+ y$ {$ O0 P" H6 d  H0 P
tx-lockless: off [fixed]
( X( v& O1 j) h5 n. {netns-local: off [fixed]8 Q- q6 x5 E0 N' V6 u
tx-gso-robust: off [fixed]
; P. |4 e5 ~4 A0 @tx-fcoe-segmentation: off [fixed]
7 J) W! g$ V7 q9 L6 X: Htx-gre-segmentation: off [fixed]
- O0 {( i( B; J. T% T  V1 {. j9 F5 otx-ipip-segmentation: off [fixed]  Y/ W: L7 P  s: B0 G* W
tx-sit-segmentation: off [fixed]
3 |; L# w. a6 y/ ]( ntx-udp_tnl-segmentation: off [fixed]3 W. o2 `2 }$ ]! {# ?# `
fcoe-mtu: off [fixed]0 s! |) g' `& S. ^9 x3 Q! g
tx-nocache-copy: off0 E6 _5 d9 P- M5 K* ^% K
loopback: off [fixed]
  _% F# v; \- ~2 a0 q& Orx-fcs: off [fixed]+ G1 {. c* n* l3 L5 b* i
rx-all: off [fixed]
5 V8 e7 k' \6 U7 d8 |+ ptx-vlan-stag-hw-insert: off [fixed]
3 p4 _! g! m+ g0 B/ H7 ]3 _2 ^rx-vlan-stag-hw-parse: off [fixed]( _6 h; s! y# Y+ B/ M5 S) W
rx-vlan-stag-filter: off [fixed]7 _5 }' e* G& H0 e# b
busy-poll: off [fixed]
; E+ F0 S& o% A; s+ q. Ctx-gre-csum-segmentation: off [fixed]: q% d9 W  ^6 Y/ c3 S) b
tx-udp_tnl-csum-segmentation: off [fixed]
+ v$ R" ]3 W9 u3 \" n/ G# jtx-gso-partial: off [fixed]
" t# P: c! @' v! t7 O3 Stx-sctp-segmentation: off [fixed]
8 I) ?9 y- W8 l; F$ |1 s, K0 Krx-gro-hw: off [fixed]
8 p) l( {$ P9 P% hl2-fwd-offload: off [fixed]0 l+ e2 X# s% [) N$ B! X% x
hw-tc-offload: off [fixed]
1 x; D& N: g" l! F4 H7 R! irx-udp_tunnel-port-offload: off [fixed]
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-11 23:57 , Processed in 0.025208 second(s), 26 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表