1. 全栈程序员必看首页

K8S报错异常锦集（持续更新）

全栈程序员-站长 • • 未分类 • 阅读 131

K8S报错异常锦集（持续更新）

更新镜像没反应 k8s组件异常

①故障现象：使用脚本更新pod服务镜像，pod无变化，状态没更新；

更新镜像：无变化
kubectl set image deployment/em-api em-api=192.168.90.10/zhufuc/em-api:v1.0-20201110100058
pod状态：
em-api-86855df489-hmvnr   1/1     Running             0          16m   172.18.94.8   k8s-n5   <none>           <none>

解决思路：检查脚本，检查私有仓库，检查步骤，查看日志，查看k8s组件

问题：k8s组件状态异常，controller-manager 异常

经排查脚本没问题，私有仓库没问题，查看日志

journalctl -f -u kubelet

Nov 10 10:11:22 k8s-m1 kubelet[32270]: E1110 10:11:22.165336   32270 kuberuntime_sandbox.go:65] CreatePodSandbox for pod "traefik-ingress-controller-jjss4_kube-system(63eee933-933a-11e9-928a-fefcfe274f71)" failed: rpc error: code = Unknown desc = failed to start sandbox container for pod "traefik-ingress-controller-jjss4": Error response from daemon: driver failed programming external connectivity on endpoint k8s_POD_traefik-ingress-controller-jjss4_kube-system_63eee933-933a-11e9-928a-fefcfe274f71_17529857 (ec7dbca09838629f1e4825175f4be3819723cb1984c9b7d00c2ed499b834fa5a):  (iptables failed: iptables --wait -t nat -A DOCKER -p tcp -d 0/0 --dport 8080 -j DNAT --to-destination 172.18.88.14:8080 ! -i docker0: iptables: No chain/target/match by that name.
Nov 10 10:11:22 k8s-m1 kubelet[32270]: (exit status 1))
Nov 10 10:11:22 k8s-m1 kubelet[32270]: E1110 10:11:22.165351   32270 kuberuntime_manager.go:662] createPodSandbox for pod "traefik-ingress-controller-jjss4_kube-system(63eee933-933a-11e9-928a-fefcfe274f71)" failed: rpc error: code = Unknown desc = failed to start sandbox container for pod "traefik-ingress-controller-jjss4": Error response from daemon: driver failed programming external connectivity on endpoint k8s_POD_traefik-ingress-controller-jjss4_kube-system_63eee933-933a-11e9-928a-fefcfe274f71_17529857 (ec7dbca09838629f1e4825175f4be3819723cb1984c9b7d00c2ed499b834fa5a):  (iptables failed: iptables --wait -t nat -A DOCKER -p tcp -d 0/0 --dport 8080 -j DNAT --to-destination 172.18.88.14:8080 ! -i docker0: iptables: No chain/target/match by that name.
Nov 10 10:11:22 k8s-m1 kubelet[32270]: (exit status 1))
Nov 10 10:11:22 k8s-m1 kubelet[32270]: E1110 10:11:22.165417   32270 pod_workers.go:190] Error syncing pod 63eee933-933a-11e9-928a-fefcfe274f71 ("traefik-ingress-controller-jjss4_kube-system(63eee933-933a-11e9-928a-fefcfe274f71)"), skipping: failed to "CreatePodSandbox" for "traefik-ingress-controller-jjss4_kube-system(63eee933-933a-11e9-928a-fefcfe274f71)" with CreatePodSandboxError: "CreatePodSandbox for pod \"traefik-ingress-controller-jjss4_kube-system(63eee933-933a-11e9-928a-fefcfe274f71)\" failed: rpc error: code = Unknown desc = failed to start sandbox container for pod \"traefik-ingress-controller-jjss4\": Error response from daemon: driver failed programming external connectivity on endpoint k8s_POD_traefik-ingress-controller-jjss4_kube-system_63eee933-933a-11e9-928a-fefcfe274f71_17529857 (ec7dbca09838629f1e4825175f4be3819723cb1984c9b7d00c2ed499b834fa5a):  (iptables failed: iptables --wait -t nat -A DOCKER -p tcp -d 0/0 --dport 8080 -j DNAT --to-destination 172.18.88.14:8080 ! -i docker0: iptables: No chain/target/match by that name.\n (exit status 1))"
Nov 10 10:11:22 k8s-m1 kubelet[32270]: I1110 10:11:22.165608   32270 server.go:459] Event(v1.ObjectReference{Kind:"Pod", Namespace:"kube-system", Name:"traefik-ingress-controller-jjss4", UID:"63eee933-933a-11e9-928a-fefcfe274f71", APIVersion:"v1", ResourceVersion:"13081364", FieldPath:""}): type: 'Warning' reason: 'FailedCreatePodSandBox' Failed create pod sandbox: rpc error: code = Unknown desc = failed to start sandbox container for pod "traefik-ingress-controller-jjss4": Error response from daemon: driver failed programming external connectivity on endpoint k8s_POD_traefik-ingress-controller-jjss4_kube-system_63eee933-933a-11e9-928a-fefcfe274f71_17529857 (ec7dbca09838629f1e4825175f4be3819723cb1984c9b7d00c2ed499b834fa5a):  (iptables failed: iptables --wait -t nat -A DOCKER -p tcp -d 0/0 --dport 8080 -j DNAT --to-destination 172.18.88.14:8080 ! -i docker0: iptables: No chain/target/match by that name.

可以看到controller是有问题的，使用命令查看一下k8s的组件

kubectl get cs

　NAME                 STATUS      MESSAGE                                                                                                                                  ERROR
　　
　　scheduler            Healthy     ok
　　
　　controller-manager   Unhealthy   Get http://127.0.0.1:10252/healthz: net/http: HTTP/1.x transport connection broken: malformed HTTP response "\x15\x03\x01\x00\x02\x02"
　　
　　etcd-1               Healthy     {"health":"true"}
　　
　　etcd-0               Healthy     {"health":"true"}
　　
　　etcd-2               Healthy     {"health":"true"}

确实是controller-manager问题
查看状态是否有报错信息，根据实际情况，我的直接重启一下就好了

systemctl status kube-controller-manager -l

systemctl restart kube-controller-manager

测试：

组件状态:
[root@k8s-m1 script]# kubectl get cs
NAME                 STATUS    MESSAGE             ERROR
controller-manager   Healthy   ok                  
scheduler            Healthy   ok                  
etcd-0               Healthy   {"health":"true"}   
etcd-1               Healthy   {"health":"true"}   
etcd-2               Healthy   {"health":"true"}   
更新镜像
kubectl set image deployment/em-api em-api=192.168.90.10/zhufuc/em-api:v1.0-20201110100058
pod状态：
em-api-7c7f76dcdc-kdr5c   0/1     ContainerCreating   0          0s    <none>        k8s-n5   <none>           <none>
em-api-86855df489-hmvnr   1/1     Running             0          16m   172.18.94.8   k8s-n5   <none>           <none>

成功解决！

k8s容器间无法通讯 网络出现问题

node01节点无法ping其他节点容器的IP，同样node01节点的容器也ping不通其他节点容器IP

示例：其他节点的容器去进行ping

node01无法通讯

在这里插入图片描述
用在node05的容器去ping在node02的容器IP和node01的容器IP
在这里插入图片描述

查看一下k8s的组件插件

kubectl get pods --all-namespaces

可以看到有的服务出现异常可以查看详情

kubectl describe pod -n kube-system  [服务名字]

在这里插入图片描述
把服务异常的pod都进行重启

kubectl delete pod -n kube-system kube-proxy-2mzcp

查看状态
在这里插入图片描述

测试

node01去ping其他容器的ip
在这里插入图片描述
成功

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请联系我们举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/101938.html原文链接：https://javaforall.net

赞 (0)
全栈程序员-站长的头像全栈程序员-站长
0 0


相关推荐

  • Java基础语法（七）条件控制语句的骚操作

    Java基础语法（七）条件控制语句的骚操作

    Java基础语法（七）条件控制语句的骚操作

    全栈程序员-站长的头像 全栈程序员-站长
    2021年4月22日
    122
  • java中遍历数组的方法_java遍历object数组

    java中遍历数组的方法_java遍历object数组

    java中遍历数组的方法_java遍历object数组参考labmbda表达式引言记录一下Java遍历数组的几种常见方法下面以遍历整数数组为例Integer[]arr={1,3,4,5,6};//这里不能使用int[]，会报错//！！！注意：使用Arrays.asList转换为集合时，不能用其进行修改集合的相关方法（add/remove)List<Integer>list=Arrays.asList(arr);1、利用for遍历//1、利用for遍历System.out.prin

    全栈程序员-站长的头像 全栈程序员-站长
    2022年9月19日
    2
  • PR曲线详解

    PR曲线详解

    PR曲线详解目录PR曲线概念precision（精准率）和recall（召回率）PR曲线功能说明PR曲线概念PR曲线中的P代表的是precision（精准率），R代表的是recall（召回率），其代表的是精准率与召回率的关系，一般情况下，将recall设置为横坐标，precision设置为纵坐标。precision（精准率）和recall（召回率）上述中介少了PR曲线的实质代表为precision（精准率）和recall（召回率），但是这二者是什么呢？下面咱们进行相关的讲述。首先，我们了解一下混淆矩阵，如下表

    全栈程序员-站长的头像 全栈程序员-站长
    2022年6月30日
    244
  • Django之模板语法

    Django之模板语法

    注：以下内容转载自：https://www.cnblogs.com/haiyan123/p/7725568.html一、模板语法之变量：语法为{{}}：在Django模板中遍历复杂数据结构

    全栈程序员-站长的头像 全栈程序员-站长
    2021年12月29日
    40
  • vue 子组件调用父组件方法传参,父组件调用也传参_面试题vue组件封装思路

    vue 子组件调用父组件方法传参,父组件调用也传参_面试题vue组件封装思路

    vue 子组件调用父组件方法传参,父组件调用也传参_面试题vue组件封装思路父组件vueprivateScoreTop:msg=”Widget”v-on:listenTochildEvent=”showMessageFromChild”>privateScoreTop>父组件jsexportdefault{data(){return{}},computed:{p

    全栈程序员-站长的头像 全栈程序员-站长
    2022年9月1日
    5
  • IDEA如何使用热部署方式启动项目？ idea

    IDEA如何使用热部署方式启动项目？

    IDEA如何使用热部署方式启动项目？热部署可以使的修改代码后，无须重启服务器，就可以加载更改的代码。具体步骤一、开启IDEA的自动编译（静态编译）操作步骤：打开顶部工具栏File->Settings->DefaultSettings->Build->Compiler然后勾选Buildprojectautomatically。二、开启IDEA的自动编译（动态编译…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年5月21日
    111

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号