找回密码
 注册
查看: 7|回复: 2

drbd启动失败后发现losetup块设备失败,image/0 UpToDate/Diskless 问题排查解决过程,完整版

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2023-12-22 15:53:02 | 显示全部楼层 |阅读模式
# losetup -a, {  C4 _5 z3 P" O9 ^0 v
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
; m3 i) F9 i; Z( u* ?( s/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)
; ?' i$ O8 ?# A7 z% |7 d  q# losetup /dev/loop3 /var/lib/qrj/glance_drbd_meta
. B, [# |6 _' c$ t, \  l# losetup -a
" @2 L( U, ?" Y7 ]8 q/dev/loop3: [fd00]:8914191 (/var/lib/qrj/glance_drbd_meta)0 _- ], d% i4 K9 p' H, _- x
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)# y0 p0 v( r4 x$ k8 y  d( y
/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)2 i5 @% ~5 u% y- |5 H. D/ @
# losetup /dev/loop4
+ H( K: c7 Q! @2 d, y/ `loop4      loop4-bak  ! {. \8 H$ p" J$ s+ F  ~/ v
# losetup /dev/loop4
, Q) e" Y( N! A% L% V8 q' vloop4      loop4-bak  % }1 r. f( u7 D  Q# `% Q
# losetup /dev/loop4 /var/lib/qrj/glance_drbd_data - Q1 Z. J7 h1 c# i1 |" W% s# g
/var/lib/qrj/glance_drbd_data: No such file or directory
1 _4 O$ [$ \9 q. V6 x4 k# cd /var/lib/
7 R% r* O# |. P, z, ralternatives/                 drbd/                         luci/                         pacemaker/                    rhsm/
; _" ^1 R$ }/ ?* K4 E- wcinder/                       games/                        misc/                         plymouth/                     ricci/
0 K3 U  M  O  i  B' K" Vcirros-0.3.1-x86_64-disk.img  glance/                       mysql/                        polkit-1/                     rpm/6 ]: Y1 f- Z5 K- U- i2 u3 Q
cluster/                      glusterd/                     net-snmp/                     postfix/                      rsyslog/* G" r5 j$ H& D; |& {# t0 _3 m
corosync/                     heartbeat/                    nfs/                          puppet/                       samba/
1 Z. g, r* d8 Z& \' C# Z- Idav/                          iscsi/                        nova/                         qpidd/                        stateless/4 |9 s+ H( f: W# C8 a  m8 Q
dbus/                         keystone/                     ntp/                          qrj/                          udev/, M& l7 u5 c1 `1 o' @
dhclient/                     libvirt/                      openstack-dashboard/          quantum/                      up2date/
! `; ^( c, D$ M. ddnsmasq/                      logrotate.status              openvswitch/                  random-seed                   yum/' _. b. l9 K- m) R+ F" B1 G! F$ ]
# cd /var/lib/qrj/  \# u; O! `7 [1 D
# ls$ X0 M5 d6 T# @$ B
glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta
# {! A# Z- h9 ~2 ~2 w# ls /var/lib/qrj/glance_drbd_data 2 u2 \" ?9 Q  p, X9 s8 A; s0 `
ls: cannot access /var/lib/qrj/glance_drbd_data: No such file or directory
% S! `) Z, y' y9 P# tar -zxvf glance_drbd_data.gz 9 D! t0 s3 y$ P4 K
# ls! P( Q' Z$ z" P7 e4 y
glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta
1 A7 `' L: z6 r. {+ [# G) X# ls
, z9 ^/ V; J0 a( k. G4 B/ N1 C' ?glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta  w) C6 J- q2 ~2 {
# ll7 G" L/ \6 E5 t3 H* m0 W" R5 n$ R
total 43334008
6 Q  `6 ?) P; Q& j/ P/ h+ o-rw-r----- 1 root root 16558927812 Jul  2  2019 glance_drbd_data.gz! R! g2 i: T' ^; E( h: @+ w4 O( e
-rw-r----- 1 root root  5120000000 Apr 20  2022 glance_drbd_meta
. J1 M4 L, ?& P( o$ _-rw-r----- 1 root root 21474836480 Dec 22 07:48 mysql_drbd_data7 x+ P1 ?6 {3 D$ K( b
-rw-r----- 1 root root  2560000000 Dec 22 07:44 mysql_drbd_meta
0 U5 L7 w+ }% E2 w$ u6 K# cp glance_drbd_data.gz glance_drbd_data
" _) j6 V  e' Z5 n! J
& y# N9 M' C: _+ U/ W- K9 n1 l- E4 U

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2023-12-22 16:04:27 | 显示全部楼层
losetup -a
* A; \0 m9 w0 v) Q) N/dev/loop3: [fd00]:8914191 (/var/lib/qrj/glance_drbd_meta)# H! N+ Z. ~& {% d, r# @
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
6 ?" y- ^: ]; X8 L/ B& {/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)  k+ ^$ N+ F; b2 K7 W3 w

4 d8 h# v0 }% r" D; t. c2 T- \  G3 u" y  n; P' f! l3 B
losetup -d /dev/loop3
6 P# x: g9 Y  w) J% h; v4 B( U: l7 X; V) x
losetup -a$ D" d$ j0 ~1 [7 r# U2 H0 Z6 v
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)' S# m# r2 x" u% p' T# W: M
/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data), O6 p  M( H7 s8 K1 Z4 p5 F! F" o9 y
, f/ h9 T1 C# _; J

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2023-12-22 17:58:29 | 显示全部楼层
# ls9 a2 @" y2 m7 ]5 Q; Q. q2 \
glance_drbd_data  glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta
' i3 K; p( Y" c4 M( |8 f# losetup -a4 m8 [; l6 X7 ~  g! m3 |
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
! z3 S% I8 E' }) ~( d+ L6 u/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)
+ E, Q  N6 p. }9 \3 `: t6 a# losetup /dev/loop3 /var/lib/qrj/glance_drbd_meta
- z; r- m$ u  E0 U3 P( z# losetup /dev/loop4 /var/lib/qrj/glance_drbd_data
0 h( }9 [: H. X& F- ~) a% t# lsblk
$ L: f" Z& A* i9 P$ YNAME                       MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
2 l2 m# s) t5 [% D3 `' C" `loop3                        7:3    0   4.8G  0 loop
0 _* c' P4 [! G) |- i! hloop4                        7:4    0    50G  0 loop ) L- j" u! O$ L* a2 r6 ^. q
loop5                        7:5    0   2.4G  0 loop
3 V3 ?& W( x: @: g- e# b6 R4 M  k3 M) floop6                        7:6    0    20G  0 loop
+ _( t! W$ e' _, x) F/ ]4 d, l+ Fsda                          8:0    0 278.5G  0 disk " ~4 }, l" f; a! V5 W
├─sda1                       8:1    0   512M  0 part /boot/efi
( s3 @( |2 N4 R9 f* ]3 u├─sda2                       8:2    0   512M  0 part /boot
2 @9 w( r' A) j) `( V) w' D├─sda3                       8:3    0    32G  0 part [SWAP]! l) ]7 D# S. @) m
└─sda4                       8:4    0 245.5G  0 part
- I. G  o% a6 v3 N+ V! Y! m  ├─Root_vg-lv_root (dm-0) 253:0    0 230.4G  0 lvm  /
: z8 U" B: G" g" q, d1 j+ P  ├─Root_vg-lv_home (dm-1) 253:1    0     5G  0 lvm  /home
: \. e9 l; Z' {* f: m7 o  └─Root_vg-lv_tmp (dm-2)  253:2    0     5G  0 lvm  /tmp
0 Z& }. \: {" Fdrbd1                      147:1    0    50G  1 disk
3 M" z) C$ V9 udrbd0                      147:0    0    20G  1 disk
: k& q9 u' T; V" Z# service drbd restart" Q9 A* b' D0 }; U( F/ Q
Stopping all DRBD resources: .# z6 h  N! A: G5 m2 Y& f
Starting DRBD resources: [
3 C* ~% Q3 e/ V  l     create res: image mysql
* R$ e. S2 K! x$ @1 U   prepare disk: image mysql
. [6 K  [+ L( p1 i4 h* W" N    adjust disk: image mysql
. S7 B' K/ j- M5 P* n     adjust net: image mysql
# p& S- N8 D8 n]1 B/ P. T0 g: ?7 ~$ A8 `
.
4 ~1 a7 G0 [2 X; F7 N1 \: ^/ ~% U# service drbd status
, K" [! Z3 r5 x" ndrbd driver loaded OK; device status:
, t- ]0 n& H# |version: 8.4.5 (api:1/proto:86-101)8 K6 g( W3 j: _+ V" D# l' U2 n
GIT-hash: 1d360bde0e095d495786eaeb2a1ac76888e4db96 build by root@cucloud002, 2015-02-06 20:04:43
- A6 c0 _2 W" s' S% \+ e) N- m: d1 @m:res    cs          ro                 ds                     p  mounted  fstype! ^* ^  i, ^' q3 ~# N( V9 e
0:mysql  Connected   Secondary/Primary  UpToDate/UpToDate      C
; d' E+ j- `. X3 d, A...      sync'ed:    1.1%               (7208/7284)M
+ [' Y2 y0 v2 {& E* R1 P1:image  SyncTarget  Secondary/Primary  Inconsistent/UpToDate  C
- N0 k$ n0 E0 H# P
( j, y8 j5 P5 U$ N9 ~! I drbd-overview & ?) H! y# p- m+ M
0:mysql/0  Connected  Secondary/Primary UpToDate/UpToDate     
' z3 A4 K. i! [5 q4 a6 o 1:image/0  SyncTarget Secondary/Primary Inconsistent/UpToDate 3 ^# i6 |, c, O( w" Y" l4 e1 E8 \
        [>...................] sync'ed:  6.4% (6828/7284)M
$ X9 P6 z# D6 V# S# j- u' L5 E5 J& T0 r+ O! B

+ |9 G9 i; A- p7 o. L& ?
& E8 z& ~# c' c+ T: F6 p" d ls
  \! U4 @2 j3 G! Iglance_drbd_data  glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta* V$ `( m& A  D" s0 {8 o

# l9 B+ O: A3 d$ W3 |) s4 d- o( R" P1 U4 p! [$ a/ n4 H9 F% T
# rm -rf  glance_drbd_data.gz
2 ~4 n, F- \9 c& b7 ^+ G# o4 g. \
9 ?% @0 Z  i( V" C' k
# drbd-overview
7 R1 S( s* K7 f# `* |9 C1 ^ 0:mysql/0  Connected  Secondary/Primary UpToDate/UpToDate     % r2 y0 b, `4 G: Q" [* M% @
1:image/0  SyncTarget Secondary/Primary Inconsistent/UpToDate . p' v8 C; k7 G4 ^  ?
        [==>.................] sync'ed: 16.5% (6092/7284)M1 G4 C9 B$ c1 {% Y. ~' m6 I4 {

" C* B% d! r! N7 V- p
( n( j! N9 k. o$ c: u& b8 o) r8 i# \7 c
# ls3 P4 ^4 y3 L+ y2 Q9 c
ls        lsattr    lsblk     lscgroup  lscpu     lshal     lsinitrd  lslogins  lsmod     lsof      lspci     lss3      lssubsys  
+ U4 j9 f) j3 t; ^
5 L, g' e/ o/ a' X' q* t
* {4 c) ?; L4 |0 N  f1 S4 o# losetup -a9 s2 i# }( _: X( R1 [
/dev/loop3: [fd00]:8914191 (/var/lib/qrj/glance_drbd_meta), m& F8 q$ l3 e' R2 ^7 ?$ D
/dev/loop4: [fd00]:8922610 (/var/lib/qrj/glance_drbd_data)
" }* {  f- y& h- ~; g3 x- l. N/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
9 l: }% }8 x1 Q: b/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)- \- O8 i/ o/ \# M4 D4 e. D, k+ Q

5 i. j) u9 s, T+ Z: k# D
, |7 D9 A) r1 P- F5 W# lsblk 2 O* M- t& p' e  n% j
NAME                       MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
' ~2 T! c5 b4 e: ]) Y! ?loop3                        7:3    0   4.8G  0 loop - I% |& A) t6 n; f" u9 m
loop4                        7:4    0    50G  0 loop
' z% V/ Y6 Z4 l; bloop5                        7:5    0   2.4G  0 loop ( S" X- i5 q. z1 E- ~% o6 r
loop6                        7:6    0    20G  0 loop
/ h8 ?9 F9 l- d) Lsda                          8:0    0 278.5G  0 disk ) x, ?( V. l' a& H1 J( U* J
├─sda1                       8:1    0   512M  0 part /boot/efi+ d* I9 [3 W0 Z- a
├─sda2                       8:2    0   512M  0 part /boot
) l# c6 V( j. c: E! q, S) \├─sda3                       8:3    0    32G  0 part [SWAP]
& g5 f+ H! q0 U( g" b└─sda4                       8:4    0 245.5G  0 part
/ G: m; I  u' H4 E0 [5 P  ├─Root_vg-lv_root (dm-0) 253:0    0 230.4G  0 lvm  /
5 Z* |( w0 R" O! n& W  ├─Root_vg-lv_home (dm-1) 253:1    0     5G  0 lvm  /home
1 O1 J. q/ f, u3 `1 R' o& N4 ]6 g  └─Root_vg-lv_tmp (dm-2)  253:2    0     5G  0 lvm  /tmp
6 I  H9 |' I! J* V$ c/ Ldrbd1                      147:1    0    50G  1 disk
5 e* W! \3 J8 bdrbd0                      147:0    0    20G  1 disk ; F7 R0 F: w) v* L7 a

3 ]. J: f0 R" Z( b3 A; @/ b  p  u5 q& `- o% a
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 00:48 , Processed in 0.018313 second(s), 23 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表