长时间运行的集群，常会面临各种资源耗尽的问题，另外磁盘不足时 Kubelet 还会主动清理镜像增加不确定因素，本文提供了一些命令片段用于清理工作。
1. Kubernetes 基础对象清理
1
|
sudo kubectl get pods --all-namespaces -o wide | grep Evicted | awk '{print $1,$2}' | sudo xargs -L1 kubectl delete pod -n
|
1
|
sudo kubectl get pods --all-namespaces -o wide | grep Error | awk '{print $1,$2}' | sudo xargs -L1 kubectl delete pod -n
|
1
|
sudo kubectl get pods --all-namespaces -o wide | grep Completed | awk '{print $1,$2}' | sudo xargs -L1 kubectl delete pod -n
|
1
|
sudo kubectl describe -A pvc | grep -E "^Name:.*$|^Namespace:.*$|^Used By:.*$" | grep -B 2 "<none>" | grep -E "^Name:.*$|^Namespace:.*$" | cut -f2 -d: | paste -d " " - - | sudo xargs -n2 bash -c 'kubectl -n ${1} delete pvc ${0}'
|
1
|
sudo kubectl get pvc --all-namespaces | tail -n +2 | grep -v Bound | awk '{print $1,$2}' | sudo xargs -L1 kubectl delete pvc -n
|
1
|
sudo kubectl get pv | tail -n +2 | grep -v Bound | awk '{print $1}' | sudo xargs -L1 kubectl delete pv
|
2. Linux 清理
1
2
3
4
|
sudo df -hl /
Filesystem Size Used Avail Use% Mounted on
/dev/sda2 100G 47G 54G 47% /
|
1
2
3
|
sudo du -sh .
24G .
|
1
2
|
cd /nfsdata
ls | grep archived- |xargs -L1 rm -r
|
1
|
sudo ps -A -ostat,ppid | grep -e '^[Zz]' | awk '{print }' | xargs kill -HUP > /dev/null 2>&1
|
3. Docker 清理
1
2
3
4
5
6
7
|
sudo docker system df
TYPE TOTAL ACTIVE SIZE RECLAIMABLE
Images 361 23 178.5GB 173.8GB (97%)
Containers 29 9 6.682GB 6.212GB (92%)
Local Volumes 4 0 3.139MB 3.139MB (100%)
Build Cache 0 0 0B 0B
|
1
|
sudo docker images | grep none | awk '{print $3}' | sudo xargs docker rmi
|
1
|
sudo docker volume rm $(docker volume ls -q)
|
或者
1
|
sudo docker volume prune
|
1
|
sudo docker builder prune
|
删除关闭的容器、无用的存储卷、无用的网络、dangling 镜像（无 tag 镜像）
这里清理的是 master-8bcf8d7-20211206-111155163 格式的镜像。
1
|
sudo docker images |grep -E "([0-9a-z]*[-]){3,}[0-9]{9}" |awk '{print $3}' | sudo xargs docker rmi
|
4. 设置定时
文本新增定时任务
1
2
|
*/35 */6 * * * sudo /usr/bin/docker images | grep none | awk '{print $3}' | xargs /usr/bin/docker rmi
45 1 * * * sudo /usr/bin/docker system prune -f
|
这里第一个任务是每隔六个小时的第 35 分钟执行，第二个任务每天的 1 时 45 分执行。这里需要注意的是，命令需要使用绝对路径，否则可能会执行失败。
设置定时格式: * * * * * shell第一个星号，minute，分钟，值为 0-59第二个星号，hour，小时，值从 0-23第三个星号，day，天，值为从 1-31第四个星号，month，月，值为从 1-12 月，或者简写的英文，比如 Nov、Feb 等第五个星号，week 周，值为从 0-6 或者简写的英文，Wen、Tur 等，代表周几，其中 0 代表周末
