NodeHasNoDiskPressure解决--docker修改默认存储路径

宫凯宁

于 2019-08-26 18:52:42 发布

阅读量7.5k

点赞数

CC 4.0 BY-SA版权

分类专栏： docker k8s 文章标签： docker kubernetes

本文链接：https://blog.csdn.net/weixin_44723434/article/details/100083534

k8s 同时被 2 个专栏收录

16 篇文章

订阅专栏

docker

3 篇文章

订阅专栏

当Kubernetes节点因/var/lib/docker磁盘空间不足导致pod被Evicted时，可通过更改Docker存储路径来解决。步骤包括删除Evicted pod，停止kubelet和docker服务，移动原有存储目录到新路径，修改docker.service配置并重启服务。此外，Eviction还可能由其他资源耗尽引起，需检查描述信息确定原因。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题描述

1、kubernetes突然出现了Evicted状态的pod。
2、使用命令kubectl get po -o wide发现node2上所有的pod状态都变成Evicted了，别的node上的pod还是正常的。
3、再使用命令kubectl describe po po-name查看pod的详细描述，发现报错如下NodeHasNoDiskPressure
4、查看主机磁盘空间，果然/var下磁盘空间不足使用超过80%，于是决定修改docker的默认存储路径至/data/docker。

解决

1、首先要删除Evicted状态的pod
kubectl get po |grep Evicted | awk '{print $1}'|xargs kubectl delete po
2、停止kubelet和docker

> systemctl stop docker 
> systemctl stop kubelet

3、将/var/lib/docker移动到/data路径

mv /var/lib/docker /data/docker

4、修改docker.service，在ExecStart后面指定目录，如下：

> vim /usr/lib/systemd/system/docker.service
ExecStart=/usr/bin/dockerd -H fd:// --containerd=/run/containerd/containerd.sock --graph /data/docker

5、启动docker

> systemctl daemon-reload
> systemctl start docker
> systemctl start kubelet

6、查看是否生效

> docker info
...
Docker Root Dir: /data/docker
...

扩展

如果kubernetes出现Evicted状态的pod不一定是磁盘空间的问题，也可能是其他资源耗尽的原因，可以通过kubectl decribe 看看是否有有用信息。