找回密码
 注册
查看: 8|回复: 2

drbd启动失败后发现losetup块设备失败,image/0 UpToDate/Diskless 问题排查解决过程,完整版

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2023-12-22 15:53:02 | 显示全部楼层 |阅读模式
# losetup -a
' j+ u, N0 l5 ?# f; `1 o) c' f/ v/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
" b3 h. I9 U' f9 K% c/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)  [+ a7 B8 ?% R" E% `$ \4 h7 Y0 a
# losetup /dev/loop3 /var/lib/qrj/glance_drbd_meta
8 j1 y% G, n2 E. U8 ]8 K# losetup -a5 B( q6 {# n4 W5 [( H3 C8 a
/dev/loop3: [fd00]:8914191 (/var/lib/qrj/glance_drbd_meta)$ |, y2 ~1 y) d
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
: L0 i2 r1 g( H1 j+ Y9 k/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)
( ]9 ]/ J+ Q# b# losetup /dev/loop4
2 U$ B' u+ G/ a. yloop4      loop4-bak  1 ]& E, \* ]/ W# x5 \  w# s
# losetup /dev/loop4( E: D( h2 Y, I8 Y2 @
loop4      loop4-bak  % A) j7 a7 }/ X* i2 R0 S% ^
# losetup /dev/loop4 /var/lib/qrj/glance_drbd_data 7 L* d6 K" s8 h9 T7 F
/var/lib/qrj/glance_drbd_data: No such file or directory
1 K& w9 T" }3 G# cd /var/lib/) D) L/ {$ l% ~& r
alternatives/                 drbd/                         luci/                         pacemaker/                    rhsm// c) N4 D3 K# x
cinder/                       games/                        misc/                         plymouth/                     ricci/
: P4 t* E0 Q, y' `+ z, T1 {1 Scirros-0.3.1-x86_64-disk.img  glance/                       mysql/                        polkit-1/                     rpm/
' R: ~1 y* k: Icluster/                      glusterd/                     net-snmp/                     postfix/                      rsyslog/5 _) o  s5 G( V) G  I4 D- Q% f; A) N' ~
corosync/                     heartbeat/                    nfs/                          puppet/                       samba/
7 y$ n5 l. m; ?: Q1 b: y0 `dav/                          iscsi/                        nova/                         qpidd/                        stateless/3 v$ J9 u, j" T
dbus/                         keystone/                     ntp/                          qrj/                          udev/
: `" y; q$ ~& x8 \dhclient/                     libvirt/                      openstack-dashboard/          quantum/                      up2date/
# M7 ?  P; u9 Zdnsmasq/                      logrotate.status              openvswitch/                  random-seed                   yum/
: @8 a# i2 c3 L6 s# cd /var/lib/qrj/
) g, Z# u, g6 e# D  P- A! l# ls
9 V( Z) l4 }1 X# Xglance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta+ s/ q/ ~6 a7 {) y$ [
# ls /var/lib/qrj/glance_drbd_data , I/ }0 q9 @  [; }# `, H0 J) G# N
ls: cannot access /var/lib/qrj/glance_drbd_data: No such file or directory' a5 ~0 ^* B$ l5 I" k8 i) _" u
# tar -zxvf glance_drbd_data.gz
1 @+ o5 e+ }/ k5 h/ Q! i1 f) s7 J# ls
3 }: t2 v' {) r: V$ \5 g, o7 _  \glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta* A0 Z6 d3 Z  Z0 F  X
# ls) W. ?5 n8 J! d) Z8 g
glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta
1 m3 i  b" F! ]# _- V# ll
& g0 }) i/ G/ b$ @# q: atotal 43334008- V, [1 E' k1 z2 d" v$ `: R
-rw-r----- 1 root root 16558927812 Jul  2  2019 glance_drbd_data.gz
6 G" }4 R! j% T! A2 {-rw-r----- 1 root root  5120000000 Apr 20  2022 glance_drbd_meta
& B- S+ ?- r- ]9 W* l-rw-r----- 1 root root 21474836480 Dec 22 07:48 mysql_drbd_data5 Q- b( W" p$ ?9 M/ T& W$ N
-rw-r----- 1 root root  2560000000 Dec 22 07:44 mysql_drbd_meta3 C9 q1 t9 }) D4 i6 g# [
# cp glance_drbd_data.gz glance_drbd_data, |$ N4 `* Q7 n: M

9 T; h$ }1 @( ?% y8 G2 u2 H9 h2 y
# W& M2 \1 i2 g

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2023-12-22 16:04:27 | 显示全部楼层
losetup -a: Q! t; W4 }$ }) w, i  Y
/dev/loop3: [fd00]:8914191 (/var/lib/qrj/glance_drbd_meta)" w3 }. V+ i4 q( j+ f
/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
: I" S9 V; b& C2 E3 _$ m! Y& o: b9 k/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)  {/ F" x1 ]  w4 \1 k% C
: r. X9 j$ J- m3 U3 q  h

* ]8 c. d5 \( a8 N' Q4 Flosetup -d /dev/loop3& ^0 T: W, \; K& C* y3 R, V
: G: U0 ]0 ]+ S. f; \/ y
losetup -a
9 C; X$ _) B# i  L/ v% X, {/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
( L% J. x! n* |  ~+ o/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)
. W6 Y$ ^5 ^3 j" b7 t
1 X* i5 D1 q+ p5 n" G8 y4 t+ ~. ~

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2023-12-22 17:58:29 | 显示全部楼层
# ls; q/ d, w$ A/ ~6 \4 }3 Z
glance_drbd_data  glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta
+ ]' J( q6 `: p+ |' Y+ _# losetup -a
. w3 ?# b* ]$ E% g; ~/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)+ u6 {/ h0 T9 G
/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)
- U5 }- P4 x) m8 |# losetup /dev/loop3 /var/lib/qrj/glance_drbd_meta
/ L( @6 e& E; X" C2 D- Z4 N; k# losetup /dev/loop4 /var/lib/qrj/glance_drbd_data 9 c0 k' l  S, }; Y1 o3 W7 j
# lsblk 0 A- b- c7 ^" }7 X; H% A3 f3 j
NAME                       MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT$ i5 J  s/ K$ d6 N; y
loop3                        7:3    0   4.8G  0 loop 0 X2 R) h- _2 z$ ~% t* z# G
loop4                        7:4    0    50G  0 loop
& l; k7 l- W% [. P) V/ g2 t& T" |( w5 rloop5                        7:5    0   2.4G  0 loop
" h7 l/ _+ P5 l: L0 V3 B- d" Iloop6                        7:6    0    20G  0 loop 8 n( Q0 D3 _" n( c
sda                          8:0    0 278.5G  0 disk " {- b8 D4 U- v1 Y, E
├─sda1                       8:1    0   512M  0 part /boot/efi) s) `0 K6 \% F( [: N
├─sda2                       8:2    0   512M  0 part /boot7 I0 y* r5 j  `2 [4 e
├─sda3                       8:3    0    32G  0 part [SWAP]
' @( Y9 A2 k) e/ ]& Z└─sda4                       8:4    0 245.5G  0 part
$ S9 {- S5 a  [8 h$ u, t8 {4 A  ├─Root_vg-lv_root (dm-0) 253:0    0 230.4G  0 lvm  /
0 Q4 K! Q; r6 A: N4 ]2 Z; S! E  ├─Root_vg-lv_home (dm-1) 253:1    0     5G  0 lvm  /home
. T# l7 v. y, x5 P* P) i  └─Root_vg-lv_tmp (dm-2)  253:2    0     5G  0 lvm  /tmp# d- {( p. Q. r) W! y7 F% u
drbd1                      147:1    0    50G  1 disk
3 t% b* B  E7 S! w8 y+ Bdrbd0                      147:0    0    20G  1 disk
) {' g7 O! C) c# ]# service drbd restart
/ V9 I/ ?7 U4 Y/ p1 Y2 R0 HStopping all DRBD resources: .# N' |# P7 ^# f; j8 }' ?. |3 ^
Starting DRBD resources: [% T5 l# n5 z* _4 S1 q, ~% p) N
     create res: image mysql9 }& @/ A$ q1 D7 g
   prepare disk: image mysql! [( @3 E4 A6 x
    adjust disk: image mysql
7 W. Y. u9 L& [) E3 R. t     adjust net: image mysql% b0 Q$ V% Y. L$ \" Q# t$ j6 j9 s$ b% P
]
# |3 T  N6 R/ @; f" i.
5 ?( y' A8 I1 d# service drbd status
! e; Y8 r* q& }, Z. S! ndrbd driver loaded OK; device status:$ `  |- S# q8 N: X" _' N
version: 8.4.5 (api:1/proto:86-101)
0 S5 {: [& ?0 T4 u' w* h3 TGIT-hash: 1d360bde0e095d495786eaeb2a1ac76888e4db96 build by root@cucloud002, 2015-02-06 20:04:43
% ~8 x/ }9 \* |  {% {/ Dm:res    cs          ro                 ds                     p  mounted  fstype
2 g  c  C& G$ f# d- _* R' R0:mysql  Connected   Secondary/Primary  UpToDate/UpToDate      C
7 P7 @3 u( ], |4 s2 y  w2 i+ x...      sync'ed:    1.1%               (7208/7284)M( B9 e1 Q7 N5 Q' \& ~: t
1:image  SyncTarget  Secondary/Primary  Inconsistent/UpToDate  C3 h3 k; w: E, Q! G/ n
' {, g; D# e8 w+ R
drbd-overview
, r% r) a  V  R7 S 0:mysql/0  Connected  Secondary/Primary UpToDate/UpToDate     
2 J( h$ n' G- C4 G 1:image/0  SyncTarget Secondary/Primary Inconsistent/UpToDate 1 d, H+ s# Z+ N
        [>...................] sync'ed:  6.4% (6828/7284)M, v1 I: a  z0 }& n

0 O3 }6 D5 l* K  M( J" S1 j
1 o6 n: A9 L* c% |! y! \  o
* A3 i$ z, k$ x2 W ls
+ ~! o- C6 J" a/ x- M! }$ f- }glance_drbd_data  glance_drbd_data.gz  glance_drbd_meta  mysql_drbd_data  mysql_drbd_meta8 M$ u, u. a' z  ^

6 \& ^( Z: p& K7 W, f, c4 G
/ {/ R1 Z4 r$ a, X( ?6 p% C# rm -rf  glance_drbd_data.gz " u% k! G+ o) F

0 d, s7 u) M: x
) L! W# k+ @, v8 j4 }# drbd-overview . O' H" e  Q4 e' X, T
0:mysql/0  Connected  Secondary/Primary UpToDate/UpToDate     ) Q' o) r" k  M. {; @+ }( f
1:image/0  SyncTarget Secondary/Primary Inconsistent/UpToDate
7 v0 @2 h7 ~! O% r        [==>.................] sync'ed: 16.5% (6092/7284)M
4 y9 o- |8 ^. _, ?
& Y* l7 x- X; H& [
# k! B: o9 ~5 g) b
9 r( Z) ]6 O4 u! }  W; v* E# ls1 y2 G: B. L  |- T* x7 ~" G
ls        lsattr    lsblk     lscgroup  lscpu     lshal     lsinitrd  lslogins  lsmod     lsof      lspci     lss3      lssubsys  ' a9 v$ w, Q9 j

2 A# E7 ?8 [# l3 L8 {& A2 ?. A' R2 F2 E/ a) l8 Z
# losetup -a$ h, i# o- Q' J+ w  ?
/dev/loop3: [fd00]:8914191 (/var/lib/qrj/glance_drbd_meta)
, w7 {' w+ _# I* x/ d' s/dev/loop4: [fd00]:8922610 (/var/lib/qrj/glance_drbd_data)
4 v8 e8 K5 N7 K0 w" a/dev/loop5: [fd00]:8914193 (/var/lib/qrj/mysql_drbd_meta)
) _$ F- \3 _5 u9 p; `/dev/loop6: [fd00]:8914192 (/var/lib/qrj/mysql_drbd_data)7 N7 Y: b2 e  H4 i# O9 v8 l# W
' e6 ~& |5 z- x, e5 J9 N( B( R

( F* V* U, U8 O' U7 _: z# lsblk
+ _9 \% R" Z/ e1 N& G% W8 INAME                       MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
) H3 g" E* O7 Q5 p' m  eloop3                        7:3    0   4.8G  0 loop
$ |6 y7 }' X( w4 x7 u+ a. qloop4                        7:4    0    50G  0 loop 9 i: d4 e% F3 H1 B- c# q
loop5                        7:5    0   2.4G  0 loop
1 f" @2 x$ T  x( S0 Q8 j) Nloop6                        7:6    0    20G  0 loop 7 h0 D  [" i$ P
sda                          8:0    0 278.5G  0 disk
, F$ i- l- u; j├─sda1                       8:1    0   512M  0 part /boot/efi, C# P$ R: V5 x
├─sda2                       8:2    0   512M  0 part /boot
, p9 F/ C4 W0 w: A/ y) H, h1 o: k' y├─sda3                       8:3    0    32G  0 part [SWAP]
5 v9 Z: X! X) r# e0 {! _└─sda4                       8:4    0 245.5G  0 part # N+ p2 G0 ]& B6 r! V+ \* I
  ├─Root_vg-lv_root (dm-0) 253:0    0 230.4G  0 lvm  /
! p" ?" |! S, B+ i4 A$ g0 q  ├─Root_vg-lv_home (dm-1) 253:1    0     5G  0 lvm  /home
1 S# \. I6 ^1 o5 n  └─Root_vg-lv_tmp (dm-2)  253:2    0     5G  0 lvm  /tmp) M: f3 ]; l/ c% @0 s$ D
drbd1                      147:1    0    50G  1 disk
4 Q) ~. t4 x% K7 @9 u" U  p0 X, _drbd0                      147:0    0    20G  1 disk
( y0 @* c( A0 o+ b& ~) f
5 G, f; @- i7 k# f) T) {: Y' ~9 N+ _+ Q* D- x+ |8 h
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 01:45 , Processed in 0.013089 second(s), 23 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表