开发环境docker服务卡住的处理过程记录


简要

在docker容器很多的服务器上,一次性关掉所有服务时经常因为一些进程卡住等奇怪的问题,把docker服务卡住,本文记录了一个暴力的方式清理docker容器的方法

docker服务卡住处理过程

1. 关闭所有docker容器时出现个别容器关不掉

尝试以下命令都会卡主

docker stop xxx
docker kill xxx
docker rm -f xxx

卡住1小时没反应,只能ctrl+c

2. 重启docker服务

sudo systemctl stop docker
sudo systemctl start docker

启动docker服务时卡住没反应,只能ctrl+c

3. 重启机器再启docker服务

sudo reboot

等3分钟再连接服务器

sudo systemctl start docker

启动docker服务依然卡住没反应,只能ctrl+c

4. 重装docker服务

sudo yum -y remove docker docker-common docker-selinux docker-engine
sudo yum -y install docker-ce docker-ce-cli containerd.io
sudo systemctl start docker

启动docker服务还是卡住

5. 删除之前没有正常关闭的docker container

sudo yum -y remove docker docker-common docker-selinux docker-engine
sudo rm -rf /var/lib/docker
sudo rm -rf /var/run/docker

提示

无法删除docker目录(rm: 无法删除"/var/lib/docker/overlay/XXXXXXXXXXXXXX/merged": 设备或资源忙)

6. 取消挂载

cat /proc/mounts |grep "docker"

显示

/dev/mapper/centos-root /var/lib/docker/overlay xfs rw,seclabel,relatime,attr2,inode64,noquota 0 0
overlay /var/lib/docker/overlay/xxxxxxxxxx

输入取消挂载

umount /var/lib/docker/overlay/xxxxxxxxxxx

或者直接批量操作

sudo umount `cat /proc/mounts |grep "docker"|awk '{print $2}'`

7. 再次安装成功

sudo rm -rf /var/lib/docker
sudo rm -rf /var/run/docker
sudo yum -y install docker-ce docker-ce-cli containerd.io
sudo systemctl start docker

参考资料

https://www.bswen.com/2020/12/others-docker-hang.html

https://forums.docker.com/t/what-to-do-when-all-docker-commands-hang/28103/2

https://blog.csdn.net/u013355826/article/details/82872073?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.control&dist_request_id=1328627.21283.16154315419035297&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.control


文章作者: 金属成色
版权声明: 本博客所有文章除特別声明外,均采用 CC BY 4.0 许可协议。转载请注明来源 金属成色 !
评论
 上一篇
python服务镜像编译so python服务镜像编译so
为什么要编译so 源码安全: 当服务部署后,别人很容易进入docker容器内部,对你的py脚本一览无余。 即使py脚本编译pyc再部署,也是可以很轻易反编译的。但是若编译成so文件,反编译成本就非常高了。 什么是so文件Unix系統下
2021-03-18
下一篇 
docker服务镜像瘦身 docker服务镜像瘦身
为什么要压缩瘦身 空间:镜像占满硬盘 时间:拉取镜像缓慢 修改前后的dockerfile先上修改后的dockerfile
2020-12-31
  目录