출처1 :&nbsp;<a style="user-select:auto;" href="https://github.com/onfido/k8s-cleanup" target="_blank">https://github.com/onfido/k8s-cleanup</a>출처2 :&nbsp;<a style="user-select:auto;" href="https://github.com/onfido/k8s-cleanup/blob/master/docker-clean.sh" target="_blank">https://github.com/onfido/k8s-cleanup/blob/master/docker-clean.sh</a>출처3 :&nbsp;<a style="user-select:auto;" href="https://aws.amazon.com/ko/premiumsupport/knowledge-center/eks-worker-nodes-image-cache/" target="_blank">https://aws.amazon.com/ko/premiumsupport/knowledge-center/eks-worker-nodes-image-cache/</a>출처4 :&nbsp;<a style="user-select:auto;" href="https://kubernetes.io/docs/concepts/architecture/garbage-collection/#containers-images" target="_blank">https://kubernetes.io/docs/concepts/architecture/garbage-collection/#containers-images</a>&nbsp;&nbsp;&nbsp;운용중인 EKS 에서 어느 순간 보니 파티션이 83% 정도 차면서 노란불이 자꾸 들어오니까 신경이 씌였다.(사진은 정리 후 라서 초록색)<img style="height:auto;max-width:100%;user-select:auto;" src="/api/file/0JX8TR9PZ88QZ"> &nbsp;&nbsp;사건은 늘 그러하듯..... Uptime을 보면 어제 갑자기 cluster node 중 한 대가 재부팅 된 데 있다.이것도 아직은 왜 재부팅이 되었는지 확실하게는 모르겠다.&nbsp;CloudWatch에서 로그를 봐도 잘 모르겠다..&nbsp;&nbsp;아무튼 노란불이 보기 싫어서 검색을 좀 해봤는데, 생각보다 k8s 구축 내용만 나오고 운영이 대한 내용은 찾기가 힘들었다.&nbsp;&nbsp;좀 더 찾다보니 `imageGCHighThresholdPercent` 라는 속성이 있다는 건 확인했는데,eksctl로 구축했더니 node에 바로 접속할 수 있는 방법도 모르겠더라.&nbsp;어찌 되었던 용량의 대부분은 overlay&nbsp; 에서 먹는 다는 걸 보니 docker의 이미지와 컨터이너들의 잔재인 것으로 생각되었고..아직 외부 오픈 전이니까 망가지면 다시 구축하자는 심정으로 아래와 같이 cluster node에 접속할 수 있었다.&nbsp;&nbsp;AWS Console에 접속해서 EC2 메뉴를 누르고, cluster node를 선택 후 오른쪽 상단에 `연결` 버튼을 누른다.&nbsp;여러가지 연결 방법들이 있지만, 키페어 등록같은 것도 안해두고 해서 `Session Manager`를 선택해서 접속을 한다.&nbsp;웹으로 접속 할 수 있다.&nbsp;&nbsp;아래와 같이 도커를 확인해보자.아마 권한이 없다고 할텐데<div style="background-color:rgb(30, 30, 30);color:rgb(212, 212, 212);font-family:D2Coding, Consolas, &quot;Courier New&quot;, monospace, Consolas, &quot;Courier New&quot;, monospace;font-size:13px;line-height:18px;user-select:auto;white-space:pre;">docker ps</div>&nbsp;다음과 같이 해결 할 수 있다.&nbsp;<div style="background-color:rgb(30, 30, 30);color:rgb(212, 212, 212);font-family:D2Coding, Consolas, &quot;Courier New&quot;, monospace, Consolas, &quot;Courier New&quot;, monospace;font-size:13px;line-height:18px;user-select:auto;white-space:pre;"><div style="user-select:auto;"># 현재 로그인한 사용자</div><div style="user-select:auto;">whoami</div> &nbsp;<div style="user-select:auto;"># root 사용자로 변경</div><div style="user-select:auto;">sudo -i</div></div>&nbsp;root 사용자로 바꿀 때 비밀번호는 물어보지 않더라.&nbsp;다시 `docker ps` 명령을 하면 정상적으로 확인할 수 있고 이 때 다음 3개의 cmd로 스토리지 용량을 다시 확보할 수 있다.<div style="background-color:rgb(30, 30, 30);color:rgb(212, 212, 212);font-family:D2Coding, Consolas, &quot;Courier New&quot;, monospace, Consolas, &quot;Courier New&quot;, monospace;font-size:13px;line-height:18px;user-select:auto;white-space:pre;"><div style="user-select:auto;">&nbsp; # Remove exited containers</div><div style="user-select:auto;">&nbsp; docker ps -a -q -f status=exited &nbsp; &nbsp;| xargs --no-run-if-empty docker rm -v</div> &nbsp;<div style="user-select:auto;">&nbsp; # Remove dangling images</div><div style="user-select:auto;">&nbsp; docker images -f "dangling=true" -q | xargs --no-run-if-empty docker rmi</div><div style="user-select:auto;">&nbsp;</div><div style="user-select:auto;">&nbsp; # Remove dangling volumes</div><div style="user-select:auto;">&nbsp; docker volume ls -qf dangling=true &nbsp;| xargs --no-run-if-empty docker volume rm</div></div>&nbsp; &nbsp;&nbsp;<hr><h2 style="user-select:auto;">번외</h2>&nbsp;위의 방법은 docker에 대해서만 정리한 내용이고&nbsp;그 이외에 오래된 replicaset 정리를 추가적으로 할 수 있다.&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;

[Kubernetes & k8s & EKS] cluster node storage volume 정리하기