找回密码
 注册
查看: 602|回复: 2

ceph health stuck requests are blocked 问题总结

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2022-7-25 13:50:13 | 显示全部楼层 |阅读模式
购买主题 本主题需向作者支付 5 金钱 才能浏览

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:25:25 | 显示全部楼层
排查:3 r- K! A* b1 U5 Z9 x2 k$ E; }( d
& U/ F- w" P: j
1、通过dstat未发现有明显的瓶颈 (dstat -tndr 2)
* k, d" _. V) r6 R5 {3 L* S+ Z7 c! V1 Z8 V# m8 Y' U, a) m
2、通过iostat也未发现有明显的瓶颈 (iostat -dx 2)
; z* X! T, _0 D8 u8 x8 \
( B) a1 B7 z2 N& C: s. _+ \3、通过netstat也未发现存储网网卡的发送队列或者接收队列有明显的积压 (netstat -an)9 [: H- R, D/ e! Z

+ T3 V+ M- k, {& a' i' a+ }4、也未出现ceph官方解释的四种问题(设备坏掉等); P: y# z1 M6 l8 A* y

8 t. e5 k1 n/ ~# v! U% `
& i  _& Y- c9 P/ [' G7 }" O0 x5 I2 J/ G
解决:
4 i; W! S: v/ r. n) h8 R9 Q, Y9 U3 M8 u3 r- p4 m; m1 b/ h
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。% z( s& w. o1 W7 p1 v  k
0 S5 x8 m. ^0 e$ A5 j

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2022-7-26 10:32:09 | 显示全部楼层
最后也是多次尝试,发现将存储网网卡的lro关掉后,恢复正常。2 y  W! F: z$ @; N

7 `1 T  v& ^% [8 h- V ethtool -k em13 a; G- u% v) d* {

: X) e6 L; ]5 P, j- E" I+ e0 a8 D[root@compute03 ~]# ethtool -K em1 gso off7 H5 u! ?4 E$ K: Z- X% G9 [- _
[root@compute03 ~]# ethtool -K em1 gso on
0 p: i/ K' t0 i' G& q4 I
9 D* O1 B7 c) ?) [5 Y$ ^& O9 n: h  p4 ~1 Y2 J
[root@compute03 ~]# ethtool -k em1 $ H! V7 L% K1 U
Features for em1:. H7 x! n# Y* l+ k" C1 e# X
rx-checksumming: on
5 [9 ?* H7 Q4 f3 ?tx-checksumming: on- C0 v+ L5 L1 a4 Y1 u2 E: `
        tx-checksum-ipv4: on) M$ r4 m, e( ]4 g
        tx-checksum-ip-generic: off [fixed]
% a  y) ~% i! M7 D) Q        tx-checksum-ipv6: on
3 A! B  G4 U$ x( [. G        tx-checksum-fcoe-crc: off [fixed]3 b9 ~# w  m" B* O9 y% h' R
        tx-checksum-sctp: off [fixed]5 l' ?6 e# {4 m8 ]' |
scatter-gather: on: ?# y( ~( ?" q; e0 R/ a
        tx-scatter-gather: on
& T! Y* F$ H, j/ R6 a        tx-scatter-gather-fraglist: off [fixed]
) k) Z% q. L0 utcp-segmentation-offload: on
) [, l- ?) E# f' i        tx-tcp-segmentation: on9 a7 ?, y+ p0 R, M- w$ ?; _% w; {9 `
        tx-tcp-ecn-segmentation: on
* X" f" T2 M' x9 B+ g7 b: Z        tx-tcp6-segmentation: on
, Q7 j# C- @- z        tx-tcp-mangleid-segmentation: off: J' s  ]7 ]- e  a3 t) u4 ~4 L3 V
udp-fragmentation-offload: off [fixed]7 ]* J9 e0 O! z2 k
generic-segmentation-offload: on) l9 U  {) Z. C; h* X' Y
generic-receive-offload: on
$ D$ u4 r5 W( X. M% }6 Xlarge-receive-offload: off [fixed]/ _! c, F: {0 G: ^5 i
rx-vlan-offload: on [fixed]6 }4 |- ?9 R% V; A2 F$ X
tx-vlan-offload: on [fixed]4 x/ M: z+ n* @4 }, b( f! a: W
ntuple-filters: off [fixed]& V6 z; _( q% ^5 f: L, V& w3 R
receive-hashing: off [fixed]
5 C8 o5 ^; c! v; R" V0 C: G9 fhighdma: on
5 M3 n' F: V$ w4 x$ \7 j* J4 ~: s8 `rx-vlan-filter: off [fixed]
% M4 `0 y( I" n) l+ _* rvlan-challenged: off [fixed]9 c/ H7 @; `3 m  S/ s6 ~" ?% j
tx-lockless: off [fixed]
+ \- o6 P6 c3 Z* t& Wnetns-local: off [fixed]% C) q: W# n, j- B! a' A
tx-gso-robust: off [fixed]
! R% j' L. K( O0 u$ D. O2 Rtx-fcoe-segmentation: off [fixed]
6 m" H* K) I& |9 r+ \tx-gre-segmentation: off [fixed]
; R+ x/ o& D5 H" d' U& L* ltx-ipip-segmentation: off [fixed]
; g4 I6 O: F% P& F3 q+ |tx-sit-segmentation: off [fixed]
0 j7 v) [/ m- F8 K) R) ntx-udp_tnl-segmentation: off [fixed]- W$ G( m0 m: r% O0 x
fcoe-mtu: off [fixed]# K& ~% h1 V' U9 H( }4 [7 v
tx-nocache-copy: off
9 W9 O" A* k7 h$ O6 J+ T; U3 `loopback: off [fixed]
* h3 u/ v$ H1 H( w3 u/ T1 Vrx-fcs: off [fixed]# `  y% X& g0 `" }( @
rx-all: off [fixed]
* P6 s' h% o0 |+ z- j4 J. utx-vlan-stag-hw-insert: off [fixed]8 y$ O- F, K  @/ X$ O
rx-vlan-stag-hw-parse: off [fixed]! @' }: K9 t  {2 `) m- h) r6 D% N- a8 P
rx-vlan-stag-filter: off [fixed]' U2 b" B3 i9 d6 [
busy-poll: off [fixed]( ~7 J" r& I) ?: o6 W# w
tx-gre-csum-segmentation: off [fixed]2 {1 U7 U+ K; \" @& S
tx-udp_tnl-csum-segmentation: off [fixed]
4 `$ B3 l, o0 M7 m* h$ ]tx-gso-partial: off [fixed]& g! b9 Q7 T" J1 w% n
tx-sctp-segmentation: off [fixed]
! ~' D/ T, l0 {( |rx-gro-hw: off [fixed]
) Z7 M4 k- r1 m& g% o0 ]' fl2-fwd-offload: off [fixed]
7 s% N8 v: r1 \, Hhw-tc-offload: off [fixed]
# M  |# X" L- K" A5 X( S, J6 yrx-udp_tunnel-port-offload: off [fixed]
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 01:16 , Processed in 0.018469 second(s), 26 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表