kubectl describe pod calico-kube-controllers-688d4bc47f-mwm7k -n kube-system 查看p

admin

[root@k8s-master ~]# kubectl describe pod calico-kube-controllers-688d4bc47f-mwm7k -n kube-system
Name:                 calico-kube-controllers-688d4bc47f-mwm7k
( S% v9 c( n. W; Q# MNamespace:            kube-system
8 X0 ]) P$ ~* iPriority:             2000000000
Priority Class Name:  system-cluster-critical
Service Account:      calico-kube-controllers
Node:                 k8s-node1/192.168.8.191
6 k1 y8 Z! ]& R' N2 PStart Time:           Wed, 01 Jan 2025 11:30:21 +0800
Labels:               k8s-app=calico-kube-controllers
                      pod-template-hash=688d4bc47f
, h8 ^. ^6 E7 C# `: I1 hAnnotations:          <none>
Status:               Running
& B* W, J7 k2 `  BIP:                   172.22.17.2
8 h+ l$ n9 V: O  x- [+ g' ]. ~IPs:
  IP:           172.22.17.2
" h  e+ S5 Z7 E0 qControlled By:  ReplicaSet/calico-kube-controllers-688d4bc47f
: q: A7 U& z/ G# f3 ]4 h7 ?Containers:
  calico-kube-controllers:
    Container ID:   docker://b43f5a7c9dcc64b76f563444e007c3476b0261f27749dc318876ceaadcd01231
' u1 F0 ~1 E' _    Image:          docker.io/calico/kube-controllers:v3.18.6
    Image ID:       docker-pullable://calico/kube-controllers@sha256:034914149a793cc6a8e3b8e8f7e0886a84dc3fd203f1979069a150cc20d588c8
- B* L6 h0 r9 ~2 N4 Q5 d, k% W    Port:           <none>
) S8 ]1 y  J' C6 }0 L2 Y    Host Port:      <none>
! f3 s& ]* ^' Y9 N0 m, ^; K, J3 Z    State:          Waiting
      Reason:       CrashLoopBackOff
! S3 ~9 o2 _! w) ~% g    Last State:     Terminated
7 w/ Y4 p+ ~1 F& |      Reason:       Error
      Exit Code:    1
8 R+ S5 k1 e: J. g+ a1 X      Started:      Wed, 01 Jan 2025 21:11:04 +0800
      Finished:     Wed, 01 Jan 2025 21:11:05 +0800
6 t* U( p% Z: K9 F" _2 A6 K5 `4 o    Ready:          False
1 I0 \* B6 [! j% l    Restart Count:  6
    Readiness:      exec [/usr/bin/check-status -r] delay=0s timeout=1s period=10s #success=1 #failure=3
3 F( c1 ^/ K9 S' j( ^; S/ @    Environment:
4 \! G% J9 Z6 x+ m' J      ENABLED_CONTROLLERS:  node
      DATASTORE_TYPE:       kubernetes
    Mounts:
      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-wph6s (ro)
5 _' D! E. R) m! HConditions:
) ?8 ?& Z# }/ w. p' O. I3 L  Type                        Status
  PodReadyToStartContainers   True
: H& ?) A1 q2 L+ C" i  Initialized                 True
  Ready                       False
  ContainersReady             False
. G' n( `: W* i' Y. A  PodScheduled                True
Volumes:
  kube-api-access-wph6s:
( f; }( J/ v2 G2 q$ U+ k- r& I    Type:                    Projected (a volume that contains injected data from multiple sources)
    TokenExpirationSeconds:  3607
    ConfigMapName:           kube-root-ca.crt
0 D" H5 ?+ v3 R2 R% S    ConfigMapOptional:       <nil>
    DownwardAPI:             true
QoS Class:                   BestEffort
6 J! q6 b  E4 j1 M; xNode-Selectors:              kubernetes.io/os=linux
Tolerations:                 CriticalAddonsOnly op=Exists
0 a5 R9 S6 ]. a# [                             node-role.kubernetes.io/master:NoSchedule
                             node.kubernetes.io/not-ready:NoExecute op=Exists for 300s
                             node.kubernetes.io/unreachable:NoExecute op=Exists for 300s
Events:
  Type     Reason                  Age                     From     Message
& C! C) l2 J* I0 w( s1 C1 L$ h  ----     ------                  ----                    ----     -------
  Normal   SandboxChanged          27m (x24998 over 9h)    kubelet  Pod sandbox changed, it will be killed and re-created.
  Warning  FailedCreatePodSandBox  12m (x25643 over 9h)    kubelet  (combined from similar events): Failed to create pod sandbox: rpc error: code = Unknown desc = failed to set up sandbox container "c1e6f7cbe8e7123c67dded0355193ce12d08a8829ac7be1e9d06456aad9646ac" network for pod "calico-kube-controllers-688d4bc47f-mwm7k": networkPlugin cni failed to set up pod "calico-kube-controllers-688d4bc47f-mwm7k_kube-system" network: plugin type="flannel" failed (add): loadFlannelSubnetEnv failed: open /run/flannel/subnet.env: no such file or directory
3 R: J2 ^  C- w& }: X) A  Normal   Pulled                  7m34s (x2 over 7m52s)   kubelet  Container image "docker.io/calico/kube-controllers:v3.18.6" already present on machine
8 z, A% ?! K- A( r2 w% k' J  Warning  BackOff                 2m27s (x28 over 7m50s)  kubelet  Back-off restarting failed container calico-kube-controllers in pod calico-kube-controllers-688d4bc47f-mwm7k_kube-system(c7b1d16a-9cfa-4808-96a1-7ad2fcbdb7fe)
4 ~5 o6 R9 \& n
- \+ L! w$ s$ w" K

1320503165

kubectl describe pod calico-node-2kbrv -n kube-system
! i# a4 a0 r5 aName:                 calico-node-2kbrv
/ u/ D  m) Q: X+ [Namespace:            kube-system
4 V, C8 S5 y% I+ i! e6 fPriority:             2000001000
Priority Class Name:  system-node-critical
Service Account:      calico-node
Node:                 k8s-master/192.168.8.190
Start Time:           Wed, 01 Jan 2025 13:00:18 +0800
Labels:               controller-revision-hash=5f4dfd76c5
, R7 p) J7 Y; D) X$ Y7 e                      k8s-app=calico-node
# @1 _5 L- `( S9 ~                      pod-template-generation=1
Annotations:          <none>
Status:               Pending
* `( c& A8 Y0 r) I: ?IP:                   192.168.8.190
. _9 t- f/ y9 }IPs:
  IP:           192.168.8.190
Controlled By:  DaemonSet/calico-node
Init Containers:
8 B6 z3 E5 w! w' R9 m: Y  upgrade-ipam:
    Container ID:  
    Image:         docker.io/calico/cni:v3.18.6
9 X$ u4 n( f( w    Image ID:      
6 R* e9 ]- `% A( b7 l' K8 ?    Port:          <none>
8 [: v9 R% `- I9 i$ N. b    Host Port:     <none>
    Command:
      /opt/cni/bin/calico-ipam
, W* v4 W+ I" B0 w4 Z      -upgrade
    State:          Waiting
      Reason:       ImagePullBackOff
3 ^5 }9 S7 W0 z    Ready:          False
    Restart Count:  0
    Environment Variables from:
      kubernetes-services-endpoint  ConfigMap  Optional: true
1 T% D' A; c4 f: g$ ]# `/ ~7 B    Environment:
9 u; J3 ^1 X& o+ `/ Q7 s      KUBERNETES_NODE_NAME:        (v1:spec.nodeName)
      CALICO_NETWORKING_BACKEND:  <set to the key 'calico_backend' of config map 'calico-config'>  Optional: false
    Mounts:
# R4 i2 \  t. ?* k      /host/opt/cni/bin from cni-bin-dir (rw)
      /var/lib/cni/networks from host-local-net-dir (rw)
- \7 q$ z, C0 Q- @9 S      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
/ {7 S5 S' I, x/ g  install-cni:
    Container ID:  
    Image:         docker.io/calico/cni:v3.18.6
; k5 M' O9 S' I, E, Q' [    Image ID:      
    Port:          <none>
    Host Port:     <none>
* W5 L3 h; |8 `+ n: f; [3 ]    Command:
2 O' f( }% d& f! i4 C      /opt/cni/bin/install
    State:          Waiting
      Reason:       PodInitializing
    Ready:          False
6 y0 E9 x, d( p: L    Restart Count:  0
5 j! m! e, q9 e2 E    Environment Variables from:
      kubernetes-services-endpoint  ConfigMap  Optional: true
! j2 o+ [4 @8 v# H4 U/ i    Environment:
      CNI_CONF_NAME:         10-calico.conflist
      CNI_NETWORK_CONFIG:    <set to the key 'cni_network_config' of config map 'calico-config'>  Optional: false
2 R; H& z0 e: C: p4 t8 _: Q  }      KUBERNETES_NODE_NAME:   (v1:spec.nodeName)
      CNI_MTU:               <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
6 n+ _/ Q. L- ?; q; n4 l      SLEEP:                 false
    Mounts:
1 V* h" k) c) K* ?  b/ c      /host/etc/cni/net.d from cni-net-dir (rw)
$ i- i6 _) ?( C. k; W- y      /host/opt/cni/bin from cni-bin-dir (rw)
7 d$ @6 R9 }8 e* P/ R9 n      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
  [* {9 U% g; |" I$ x  flexvol-driver:
  @$ Z' D: O9 F' A! z+ O    Container ID:   
5 H4 @3 H& g7 ^: R5 q/ v" q    Image:          docker.io/calico/pod2daemon-flexvol:v3.18.6
    Image ID:      
; a# E( J7 p9 @: J& @6 _1 k- \/ h    Port:           <none>
1 s' D% V8 h/ ?! U  y. Q+ P- L9 e    Host Port:      <none>
7 D% d! A2 M3 A9 X    State:          Waiting
$ |8 J; J9 \) t- D( a      Reason:       PodInitializing
/ b9 D/ k0 x( o' O9 w. i    Ready:          False
    Restart Count:  0
    Environment:    <none>
    Mounts:
1 A: z( M% d. E. \5 x3 {      /host/driver from flexvol-driver-host (rw)
      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
Containers:
$ v6 o3 e0 `) A. S0 d7 {4 Z  calico-node:
    Container ID:   
$ _. T( x4 q7 J. L7 J" a    Image:          docker.io/calico/node:v3.18.6
* P4 K( M; ]) O8 n- K6 l# J$ b5 f( h    Image ID:      
    Port:           <none>
    Host Port:      <none>
    State:          Waiting
7 |+ G, O, n% _) j, v      Reason:       PodInitializing
0 s. g6 D2 m, @. k& ^' X4 v    Ready:          False
+ a, W' D$ d+ u' H4 I    Restart Count:  0
    Requests:
: n4 {: Y" d* q6 E$ J+ \      cpu:      250m
    Liveness:   exec [/bin/calico-node -felix-live -bird-live] delay=10s timeout=1s period=10s #success=1 #failure=6
    Readiness:  exec [/bin/calico-node -felix-ready -bird-ready] delay=0s timeout=1s period=10s #success=1 #failure=3
    Environment Variables from:
. L  Z2 B; @; K+ O& Z4 r      kubernetes-services-endpoint  ConfigMap  Optional: true
    Environment:
3 ?% M. |+ y+ J  L/ t/ |% j8 ^1 s      DATASTORE_TYPE:                     kubernetes
      WAIT_FOR_DATASTORE:                 true
      NODENAME:                            (v1:spec.nodeName)
5 [" F% r5 {- J, |4 w! L; P      CALICO_NETWORKING_BACKEND:          <set to the key 'calico_backend' of config map 'calico-config'>  Optional: false
/ k% e' I" ^0 _( g; u# ?# i      CLUSTER_TYPE:                       k8s,bgp
  p! T" z$ n" r( H" x5 [7 r: B8 P& H      IP:                                 autodetect
      CALICO_IPV4POOL_IPIP:               Always
: U% A  K3 T- n: a% Y: q      CALICO_IPV4POOL_VXLAN:              Never
      FELIX_IPINIPMTU:                    <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
2 ]5 @! b& W5 I" Q( D, Z4 g0 [6 G      FELIX_VXLANMTU:                     <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
      FELIX_WIREGUARDMTU:                 <set to the key 'veth_mtu' of config map 'calico-config'>  Optional: false
* v- B, ?* w/ k" z8 X) F% |      CALICO_DISABLE_FILE_LOGGING:        true
( X6 v3 Q2 [; T      FELIX_DEFAULTENDPOINTTOHOSTACTION:  ACCEPT
      FELIX_IPV6SUPPORT:                  false
! r" v6 o( ^9 ^+ x8 d. Q* s      FELIX_LOGSEVERITYSCREEN:            info
      FELIX_HEALTHENABLED:                true
/ i4 B/ d" K& _+ x+ x# }    Mounts:
      /lib/modules from lib-modules (ro)
      /run/xtables.lock from xtables-lock (rw)
      /sys/fs/ from sysfs (rw)
1 L% b; G6 [. j* V9 p      /var/lib/calico from var-lib-calico (rw)
) }, N, V  L* M      /var/log/calico/cni from cni-log-dir (ro)
      /var/run/calico from var-run-calico (rw)
      /var/run/nodeagent from policysync (rw)
. y8 V/ n# r/ f" V6 P( I: d      /var/run/secrets/kubernetes.io/serviceaccount from kube-api-access-5zp5k (ro)
Conditions:
, x4 \- g5 t& v8 P  Type                        Status
* r) h# B5 W# V' D: d! P/ s% a  PodReadyToStartContainers   True
$ \; P, W0 p" t7 |  H  Initialized                 False
3 b: a9 R/ y) w$ m1 e  Ready                       False
  ContainersReady             False
5 m  L9 y) B9 P- x" l, D  PodScheduled                True
Volumes:
  lib-modules:
- }( r9 M2 Y$ z. Z/ \! |8 h! D    Type:          HostPath (bare host directory volume)
    Path:          /lib/modules
    HostPathType:  
6 t, i% {! A% d7 G; t  var-run-calico:
    Type:          HostPath (bare host directory volume)
+ M% K7 [/ v. I' N! O    Path:          /var/run/calico
1 v2 I* w/ K* `) X# k) w- d* N    HostPathType:  
  var-lib-calico:
    Type:          HostPath (bare host directory volume)
# _& f& Y1 W4 D3 l( m3 T    Path:          /var/lib/calico
    HostPathType:  
  xtables-lock:
/ {, G1 a" H0 {    Type:          HostPath (bare host directory volume)
0 y/ h, E5 q, h  i    Path:          /run/xtables.lock
    HostPathType:  FileOrCreate
. b: V2 f! I% ^1 }  sysfs:
    Type:          HostPath (bare host directory volume)
    Path:          /sys/fs/
    HostPathType:  DirectoryOrCreate
5 a9 D! Z2 `- C3 I* C8 k4 E  cni-bin-dir:
    Type:          HostPath (bare host directory volume)
3 Z3 d% o" u5 X! {6 b+ \    Path:          /opt/cni/bin
    HostPathType:  
  cni-net-dir:
    Type:          HostPath (bare host directory volume)
5 w+ {* p( d; C! z4 j    Path:          /etc/cni/net.d
& H+ H/ \+ D$ C, c) ?8 |    HostPathType:  
/ X. p! Y- m# I5 S0 H  cni-log-dir:
    Type:          HostPath (bare host directory volume)
    Path:          /var/log/calico/cni
    HostPathType:  
  host-local-net-dir:
' X" I% p, ^% H& k$ y5 N1 o; m1 T4 S& ~7 {    Type:          HostPath (bare host directory volume)
! d6 o& U0 d( y6 t3 V; h. Y% u2 P0 @    Path:          /var/lib/cni/networks
    HostPathType:  
  policysync:
    Type:          HostPath (bare host directory volume)
) T' j& {, h( C; {4 [% F    Path:          /var/run/nodeagent
    HostPathType:  DirectoryOrCreate
0 q9 f# M: M- Z( M* G4 x2 D' h7 A  flexvol-driver-host:
    Type:          HostPath (bare host directory volume)
    Path:          /usr/libexec/kubernetes/kubelet-plugins/volume/exec/nodeagent~uds
3 I8 `/ X( }& s" P5 w" E    HostPathType:  DirectoryOrCreate
- t* a) }2 h3 ?. ~1 Y# B2 u$ J3 y  kube-api-access-5zp5k:
: w* f/ x% e/ T3 M: V6 N    Type:                    Projected (a volume that contains injected data from multiple sources)
$ _8 Y- u5 {- a4 z4 ]& ]4 @  m) p$ t( n    TokenExpirationSeconds:  3607
/ m4 w- B2 b5 g! c- H1 n    ConfigMapName:           kube-root-ca.crt
1 T  }* D: v% ~) U    ConfigMapOptional:       <nil>
    DownwardAPI:             true
& o# e8 }0 O2 K' O" KQoS Class:                   Burstable
0 f7 L0 z% f& u( m0 DNode-Selectors:              kubernetes.io/os=linux
Tolerations:                 :NoSchedule op=Exists
# V5 e: P2 Q: e9 G7 s& e% f! z, d                             :NoExecute op=Exists
/ }/ S" n0 D% i1 B0 g  r: q; o. |                             CriticalAddonsOnly op=Exists
                             node.kubernetes.io/disk-pressure:NoSchedule op=Exists
- }3 t1 ~4 H4 J4 O  T                             node.kubernetes.io/memory-pressure:NoSchedule op=Exists
                             node.kubernetes.io/network-unavailable:NoSchedule op=Exists
                             node.kubernetes.io/not-ready:NoExecute op=Exists
, @& Y- X6 O% e. I* A                             node.kubernetes.io/pid-pressure:NoSchedule op=Exists
7 F. e$ O6 ~! ~9 w5 r2 U3 s                             node.kubernetes.io/unreachable:NoExecute op=Exists
                             node.kubernetes.io/unschedulable:NoSchedule op=Exists
Events:
1 e% I5 C8 n% Z4 `9 l  Type     Reason   Age                     From     Message
  ----     ------   ----                    ----     -------
2 y$ m3 y# }$ Q1 Y; b% t/ s  Warning  Failed   19m (x196 over 21h)     kubelet  Failed to pull image "docker.io/calico/cni:v3.18.6": rpc error: code = Canceled desc = context canceled
+ z, w8 P" q6 U  Normal   BackOff  4m43s (x4360 over 21h)  kubelet  Back-off pulling image "docker.io/calico/cni:v3.18.6"

admin

1320503165 发表于 2025-1-2 11:00
kubectl describe pod calico-node-2kbrv -n kube-system
6 B; r# }( h2 H/ m" d( W* M9 |Name:                 calico-node-2kbrv
4 E/ e! O3 R/ X, \; I8 xName ...

- f; ]# I4 b/ p* Q解决办法就是，手动拉取镜像：
[root@k8s-master ~]# docker pull docker.io/calico/cni:v3.18.6
v3.18.6: Pulling from calico/cni
2 c" {! V" \, o. T! J6 J75773be97732: Pull complete
9c53b0f48252: Pull complete
' U, l/ Q  f! q( ]d34d79bc7dd5: Pull complete
Digest: sha256:50fedf3349c647191cc03b023f00d446fb55e0a302cb2ea5eb2e55e47da7614c
6 h: u9 h0 n# Y  PStatus: Downloaded newer image for calico/cni:v3.18.6
docker.io/calico/cni:v3.18.6
+ `/ X8 l; T' W% o- t1 y! O