kubectl describe pod calico-kube-controllers-688d4bc47f-mwm7k -n kube-system 查看p

admin

[root@k8s-master ~]# kubectl describe pod calico-kube-controllers-688d4bc47f-mwm7k -n kube-system
Name:                 calico-kube-controllers-688d4bc47f-mwm7k
Namespace:            kube-system
( `& V) T% v- Z3 I' A. |  TPriority:             2000000000
$ o0 u7 Y4 S( k1 a! Y% e$ GPriority Class Name:  system-cluster-critical
Service Account:      calico-kube-controllers
0 f+ ^- K' A6 P7 F/ A1 F; ONode:                 k8s-node1/192.168.8.191
/ W" ~& \. _- G! G/ g8 D, `Start Time:           Wed, 01 Jan 2025 11:30:21 +0800
Labels:               k8s-app=calico-kube-controllers
                      pod-template-hash=688d4bc47f
) k( c" E7 Y' V  h4 j+ `; K1 s* [Annotations:          <none>
- w; `: |$ S3 P# U% j$ ]8 m- C' @) |Status:               Running
IP:                   172.22.17.2
( v+ l; z# @0 v; LIPs:
6 }/ e" p9 @& D% K  IP:           172.22.17.2
Controlled By:  ReplicaSet/calico-kube-controllers-688d4bc47f
; @7 p3 A7 H& oContainers:
  calico-kube-controllers:
4 `, b; {& n7 S    Container ID:   docker://b43f5a7c9dcc64b76f563444e007c3476b0261f27749dc318876ceaadcd01231
( J" U* o/ ~6 {/ _8 y, N    Image:          docker.io/calico/kube-controllers:v3.18.6
9 X& Y8 a& p! O- y% c# v/ h    Image ID:       docker-pullable://calico/kube-controllers@sha256:034914149a793cc6a8e3b8e8f7e0886a84dc3fd203f1979069a150cc20d588c8
) U2 U  J, I& G9 s5 O    Port:           <none>
    Host Port:      <none>
6 R! v- t8 e: p) T- K7 u& t    State:          Waiting
      Reason:       CrashLoopBackOff
) D8 y" M0 V7 T$ w3 C! H- i    Last State:     Terminated
' X. {- V+ ?# j4 J! R7 V5 G      Reason:       Error
      Exit Code:    1
      Started:      Wed, 01 Jan 2025 21:11:04 +0800
      Finished:     Wed, 01 Jan 2025 21:11:05 +0800
    Ready:          False
    Restart Count:  6
: v% i2 M% l  ~+ M) B% T8 v' G    Readiness:      exec [/usr/bin/check-status -r] delay=0s timeout=1s period=10s #success=1 #failure=3
# p3 A/ y' m( U    Environment:
      ENABLED_CONTROLLERS:  node
7 A) K, l. ~! n0 g8 v3 h0 o      DATASTORE_TYPE:       kubernetes
8 r2 D7 g2 k# i3 M/ T# M6 S; ]9 \    Mounts:
6 w- J5 y/ n- L  d7 F, _      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-wph6s (ro)
, x8 q3 K5 W: W& c. _; X$ VConditions:
  Type                        Status
8 Z) G6 X+ A' t9 w+ C$ M  PodReadyToStartContainers   True
  Initialized                 True
  Ready                       False
  ContainersReady             False
  PodScheduled                True
9 J: h) l$ U" ~+ e$ RVolumes:
4 p/ b# h6 A+ _: o* G; \3 V  kube-api-access-wph6s:
$ r8 ~; V' o5 N3 F    Type:                    Projected (a volume that contains injected data from multiple sources)
    TokenExpirationSeconds:  3607
    ConfigMapName:           kube-root-ca.crt
    ConfigMapOptional:       <nil>
% X) k+ i9 }3 w! a2 s3 w% Z. d    DownwardAPI:             true
  f6 M$ V8 `. b2 R- {/ IQoS Class:                   BestEffort
% o- l+ X7 ]) h* r0 LNode-Selectors:              kubernetes.io/os=linux
; M' d& X, |9 k* s( ~Tolerations:                 CriticalAddonsOnly op=Exists
. e1 ^7 b1 a9 K0 K3 D                             node-role.kubernetes.io/master:NoSchedule
                             node.kubernetes.io/not-ready:NoExecute op=Exists for 300s
                             node.kubernetes.io/unreachable:NoExecute op=Exists for 300s
Events:
; T! @0 q6 a! ^7 _/ G6 F  Type     Reason                  Age                     From     Message
2 k$ G3 @: f: U: _! `2 s. b8 f0 {+ f& P  ----     ------                  ----                    ----     -------
  Normal   SandboxChanged          27m (x24998 over 9h)    kubelet  Pod sandbox changed, it will be killed and re-created.
  Warning  FailedCreatePodSandBox  12m (x25643 over 9h)    kubelet  (combined from similar events): Failed to create pod sandbox: rpc error: code = Unknown desc = failed to set up sandbox container "c1e6f7cbe8e7123c67dded0355193ce12d08a8829ac7be1e9d06456aad9646ac" network for pod "calico-kube-controllers-688d4bc47f-mwm7k": networkPlugin cni failed to set up pod "calico-kube-controllers-688d4bc47f-mwm7k_kube-system" network: plugin type="flannel" failed (add): loadFlannelSubnetEnv failed: open /run/flannel/subnet.env: no such file or directory
" ]7 {) I5 [; C  Z  Normal   Pulled                  7m34s (x2 over 7m52s)   kubelet  Container image "docker.io/calico/kube-controllers:v3.18.6" already present on machine
  Warning  BackOff                 2m27s (x28 over 7m50s)  kubelet  Back-off restarting failed container calico-kube-controllers in pod calico-kube-controllers-688d4bc47f-mwm7k_kube-system(c7b1d16a-9cfa-4808-96a1-7ad2fcbdb7fe)
, o% ~5 P2 @9 j9 Y4 X" E8 p
1 u( o3 Y2 [# l: H+ W, G

1320503165

kubectl describe pod calico-node-2kbrv -n kube-system
" {0 S: u' F8 f4 fName:                 calico-node-2kbrv
Namespace:            kube-system
2 a- B4 X" ?" R7 E/ w  T) iPriority:             2000001000
5 U% i6 t1 z& P! P: w/ RPriority Class Name:  system-node-critical
Service Account:      calico-node
Node:                 k8s-master/192.168.8.190
+ M) R  e( ~  _+ B) XStart Time:           Wed, 01 Jan 2025 13:00:18 +0800
Labels:               controller-revision-hash=5f4dfd76c5
$ i5 e1 e+ [7 h/ ^                      k8s-app=calico-node
2 t9 L, y  G# `: w$ H5 j: i                      pod-template-generation=1
( Z' v; ], t2 lAnnotations:          <none>
Status:               Pending
6 Y8 Z3 p4 o  g) I" }8 {- NIP:                   192.168.8.190
IPs:
  IP:           192.168.8.190
Controlled By:  DaemonSet/calico-node
7 N2 d. U. |/ ~0 V" t$ P( `Init Containers:
  upgrade-ipam:
    Container ID:  
6 y) z; I, _# v6 G' p    Image:         docker.io/calico/cni:v3.18.6
    Image ID:      
& S% F5 j' y3 \1 W) D! O, t    Port:          <none>
    Host Port:     <none>
& E- N& i/ K, N; n. P# N    Command:
. `: E- O/ Y# _# ]2 Z1 M8 E      /opt/cni/bin/calico-ipam
      -upgrade
    State:          Waiting
      Reason:       ImagePullBackOff
    Ready:          False
    Restart Count:  0
- P+ V9 c3 X' G# y    Environment Variables from:
      kubernetes-services-endpoint  ConfigMap  Optional: true
( t7 a4 q2 K' w  z" S1 d    Environment:
+ ^: l( T7 _; O" r: z      KUBERNETES_NODE_NAME:        (v1:spec.nodeName)
      CALICO_NETWORKING_BACKEND:  <set to the key 'calico_backend' of config map 'calico-config'>  Optional: false
' k! f/ J6 c, v, V. R2 N2 C7 s    Mounts:
* w) M: ]' B- i( c) j! [3 y      /host/opt/cni/bin from cni-bin-dir (rw)
      /var/lib/cni/networks from host-local-net-dir (rw)
      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
) r' h. J2 B! t8 y8 E  install-cni:
8 `7 K3 t) O9 r. f1 f! J    Container ID:  
: O8 |% H* ?$ c* Z" M; |0 [) B    Image:         docker.io/calico/cni:v3.18.6
0 N8 |! L* \6 J. \* F0 c% _8 D    Image ID:      
$ E% g& g8 z, @8 a  y' f    Port:          <none>
7 T9 Z4 C1 w7 S; Z& B3 N    Host Port:     <none>
    Command:
      /opt/cni/bin/install
2 k: M, d$ n! R2 w, c3 p    State:          Waiting
      Reason:       PodInitializing
    Ready:          False
9 Z. I, y0 d* Q7 Y; v    Restart Count:  0
& V3 o" }0 @2 N- ]' a    Environment Variables from:
" A; s4 l3 G8 W3 ~9 b- H& t- d      kubernetes-services-endpoint  ConfigMap  Optional: true
  T0 i! G6 ~/ @6 |' f    Environment:
) j& C: x1 B5 A. R      CNI_CONF_NAME:         10-calico.conflist
6 P- x# p' V# \- d3 m7 u) b) `      CNI_NETWORK_CONFIG:    <set to the key 'cni_network_config' of config map 'calico-config'>  Optional: false
      KUBERNETES_NODE_NAME:   (v1:spec.nodeName)
2 j& L: z" m9 F% L( N      CNI_MTU:               <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
      SLEEP:                 false
    Mounts:
* [2 m; k: T: x3 C, h# d      /host/etc/cni/net.d from cni-net-dir (rw)
- \: G9 Y9 q8 {- L% L1 p      /host/opt/cni/bin from cni-bin-dir (rw)
      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
! j3 T9 ^/ p0 c) a  flexvol-driver:
- K+ w) u3 E! {  K' A8 h$ W    Container ID:   
4 u- b/ A6 {6 Z3 P' T; e2 F4 @    Image:          docker.io/calico/pod2daemon-flexvol:v3.18.6
    Image ID:      
0 ], ]/ _/ b; g% [1 Q( i# A7 Y- M# D  s    Port:           <none>
  C1 o. @2 L! ~% {8 ^" W    Host Port:      <none>
    State:          Waiting
      Reason:       PodInitializing
  X2 X1 b6 S. q. Q0 V  Y    Ready:          False
    Restart Count:  0
    Environment:    <none>
    Mounts:
2 z( X4 t; P# f$ y- f1 Y# A* K      /host/driver from flexvol-driver-host (rw)
      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
Containers:
5 e9 o2 c3 @) |# v  calico-node:
8 c: j: W+ z2 k( v" c3 E* X    Container ID:   
. _% X" v. ~* a( M# b    Image:          docker.io/calico/node:v3.18.6
1 H: R- o6 b( h9 t: i    Image ID:      
    Port:           <none>
" \3 z/ ~1 J, R5 q! F% H* t    Host Port:      <none>
    State:          Waiting
      Reason:       PodInitializing
    Ready:          False
, J( P- N" @, B' c    Restart Count:  0
$ C' O% u% |3 f4 T" z    Requests:
, R/ X) |1 ]$ t5 x4 p$ p3 C* y      cpu:      250m
    Liveness:   exec [/bin/calico-node -felix-live -bird-live] delay=10s timeout=1s period=10s #success=1 #failure=6
, Q( h9 A/ H! n" t/ V( I4 ~    Readiness:  exec [/bin/calico-node -felix-ready -bird-ready] delay=0s timeout=1s period=10s #success=1 #failure=3
) q5 G. m/ Y, H" l    Environment Variables from:
      kubernetes-services-endpoint  ConfigMap  Optional: true
( P2 w8 A9 k8 E' v  Z" ?' V1 r    Environment:
      DATASTORE_TYPE:                     kubernetes
      WAIT_FOR_DATASTORE:                 true
" o) T# ?- u  s5 f& C      NODENAME:                            (v1:spec.nodeName)
      CALICO_NETWORKING_BACKEND:          <set to the key 'calico_backend' of config map 'calico-config'>  Optional: false
' U, {* s' P3 d4 B8 P5 B      CLUSTER_TYPE:                       k8s,bgp
4 r! \# M6 Z( r      IP:                                 autodetect
+ K+ W3 p/ E3 t1 s      CALICO_IPV4POOL_IPIP:               Always
      CALICO_IPV4POOL_VXLAN:              Never
; {$ m6 g9 ?8 v      FELIX_IPINIPMTU:                    <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
      FELIX_VXLANMTU:                     <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
      FELIX_WIREGUARDMTU:                 <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
      CALICO_DISABLE_FILE_LOGGING:        true
      FELIX_DEFAULTENDPOINTTOHOSTACTION:  ACCEPT
      FELIX_IPV6SUPPORT:                  false
. L/ \7 C# J0 |( R0 s. Q      FELIX_LOGSEVERITYSCREEN:            info
+ Y. H2 |# T! W      FELIX_HEALTHENABLED:                true
    Mounts:
      /lib/modules from lib-modules (ro)
      /run/xtables.lock from xtables-lock (rw)
      /sys/fs/ from sysfs (rw)
      /var/lib/calico from var-lib-calico (rw)
- P; g8 x* ]8 j& J) {+ ?" O# M      /var/log/calico/cni from cni-log-dir (ro)
1 ~" O1 Q' G" |" d' V9 ~# t; }      /var/run/calico from var-run-calico (rw)
9 F. r. i5 A) h+ [7 d- i      /var/run/nodeagent from policysync (rw)
2 g# ^4 ]8 j- x) n: B      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
, W/ {0 l$ v% E4 V; B( cConditions:
  Type                        Status
  Y- w  w' p1 ^: d1 t  PodReadyToStartContainers   True
4 a! W7 D+ X" B+ q7 u* F  Initialized                 False
7 T& l3 d+ j. _% F! z) G  Ready                       False
1 ]* i2 j/ |$ d' k( y* w  ContainersReady             False
3 {9 e( i! J; i2 B% I  PodScheduled                True
Volumes:
+ W6 E0 K# W3 _4 |  lib-modules:
    Type:          HostPath (bare host directory volume)
$ q9 c& V; S% O: T5 v; _7 }1 L5 v    Path:          /lib/modules
    HostPathType:  
  var-run-calico:
7 L! D# N, l4 Z& T3 i( S    Type:          HostPath (bare host directory volume)
7 P! S) }; V! r4 M# x    Path:          /var/run/calico
    HostPathType:  
% k  j- k: Z5 u2 S" N6 @  var-lib-calico:
    Type:          HostPath (bare host directory volume)
    Path:          /var/lib/calico
$ h2 p# p9 O9 @1 z4 \! r$ q0 v" C    HostPathType:  
" F' A8 K2 g9 W5 G" j; R1 U  xtables-lock:
    Type:          HostPath (bare host directory volume)
: o7 A4 H9 d5 e; g5 ~7 K    Path:          /run/xtables.lock
4 s: t- _4 e0 N+ S1 O% K1 s) x' ~    HostPathType:  FileOrCreate
  sysfs:
1 L( v# h. o2 m    Type:          HostPath (bare host directory volume)
    Path:          /sys/fs/
    HostPathType:  DirectoryOrCreate
. Z5 `+ N$ J' E/ R8 u( Z$ E3 n& C  cni-bin-dir:
+ y+ @% j6 ?0 D$ ~8 k0 U: d! D4 d    Type:          HostPath (bare host directory volume)
+ C8 M% X$ E% Y$ a: U7 _4 X  X    Path:          /opt/cni/bin
$ r( i* u8 ~' K$ ~3 R* Y& g    HostPathType:  
  cni-net-dir:
% ^" S- I- q* N  Y. s    Type:          HostPath (bare host directory volume)
    Path:          /etc/cni/net.d
- [) ?, C" R7 s2 _; l    HostPathType:  
3 @) ?9 d) A& u5 ^$ O  cni-log-dir:
* I* g2 L% u) F2 J4 f2 y    Type:          HostPath (bare host directory volume)
    Path:          /var/log/calico/cni
    HostPathType:  
  host-local-net-dir:
    Type:          HostPath (bare host directory volume)
    Path:          /var/lib/cni/networks
    HostPathType:  
) _1 ]9 m( [5 h* Z9 c/ r  policysync:
    Type:          HostPath (bare host directory volume)
    Path:          /var/run/nodeagent
3 t$ n: T) f8 n2 h9 i    HostPathType:  DirectoryOrCreate
  flexvol-driver-host:
    Type:          HostPath (bare host directory volume)
* J& r' S0 H" N: e, G1 K5 H! Z    Path:          /usr/libexec/kubernetes/kubelet-plugins/volume/exec/nodeagent~uds
    HostPathType:  DirectoryOrCreate
  kube-api-access-5zp5k:
1 W0 T1 W- ?3 h" h    Type:                    Projected (a volume that contains injected data from multiple sources)
/ q! @: r' h& j2 k) H3 z, @    TokenExpirationSeconds:  3607
, U% I  W8 H, d    ConfigMapName:           kube-root-ca.crt
9 |+ q) J  k2 B4 O* @! P) K: I    ConfigMapOptional:       <nil>
    DownwardAPI:             true
QoS Class:                   Burstable
5 ~- @3 ]' n$ q/ m; p) nNode-Selectors:              kubernetes.io/os=linux
8 o5 ~+ {9 X  {- v2 S, @* f# BTolerations:                 :NoSchedule op=Exists
                             :NoExecute op=Exists
3 K; Y2 @. z( T' P% n* w% U+ c                             CriticalAddonsOnly op=Exists
9 e9 Y. P7 F& n5 w4 d                             node.kubernetes.io/disk-pressure:NoSchedule op=Exists
                             node.kubernetes.io/memory-pressure:NoSchedule op=Exists
                             node.kubernetes.io/network-unavailable:NoSchedule op=Exists
* ?. l/ j% c6 W; U7 Q                             node.kubernetes.io/not-ready:NoExecute op=Exists
  R/ ^" ]) Q; ?                             node.kubernetes.io/pid-pressure:NoSchedule op=Exists
                             node.kubernetes.io/unreachable:NoExecute op=Exists
! E% ?2 K4 }# _! L7 W% q2 p3 k, X                             node.kubernetes.io/unschedulable:NoSchedule op=Exists
# r+ F" F: ?: g2 g$ a! K# l  dEvents:
& U' n5 I7 T6 k/ a( l  Type     Reason   Age                     From     Message
& e  k4 y- X& }9 v; {; \& j  ----     ------   ----                    ----     -------
- V2 C/ d+ H. _  Warning  Failed   19m (x196 over 21h)     kubelet  Failed to pull image "docker.io/calico/cni:v3.18.6": rpc error: code = Canceled desc = context canceled
, J  `# l7 k0 r* D6 i5 q  Normal   BackOff  4m43s (x4360 over 21h)  kubelet  Back-off pulling image "docker.io/calico/cni:v3.18.6"

admin

1320503165 发表于 2025-1-2 11:00
0 |0 o: w& s1 s1 m' ?7 I" a% Pkubectl describe pod calico-node-2kbrv -n kube-system
: C; M7 `7 q2 {/ K% f# q. C0 lName:                 calico-node-2kbrv
: |# s4 J" M1 k1 t% x7 PName ...

解决办法就是，手动拉取镜像：
[root@k8s-master ~]# docker pull docker.io/calico/cni:v3.18.6
v3.18.6: Pulling from calico/cni
. ~4 b8 Q8 @# q4 D$ ], T# R% V75773be97732: Pull complete
9c53b0f48252: Pull complete
  _) _1 Z/ S" v) s/ Cd34d79bc7dd5: Pull complete
, s; p4 ~( L) Y* HDigest: sha256:50fedf3349c647191cc03b023f00d446fb55e0a302cb2ea5eb2e55e47da7614c
/ d" N8 l/ w3 \* _, u3 m  M0 H( g& ~Status: Downloaded newer image for calico/cni:v3.18.6
docker.io/calico/cni:v3.18.6