[AWS,Docker] No space left on device 오류 + cron으로 docker미사용 컨테이너 삭제

오류 메시지

No space left on device 오류가 떠서 구글링해보니 서버 저장공간 부족 오류라고 한다

java.io.IOException: No space left on device
    at java.base/java.io.FileOutputStream.writeBytes(Native Method)
    at java.base/java.io.FileOutputStream.write(FileOutputStream.java:349)
    at org.apache.tomcat.util.http.fileupload.ThresholdingOutputStream.write(ThresholdingOutputStream.java:127)
    at org.apache.tomcat.util.http.fileupload.util.Streams.copy(Streams.java:104)
    at org.apache.tomcat.util.http.fileupload.FileUploadBase.parseRequest(FileUploadBase.java:317)
    at org.apache.catalina.connector.Request.parseParts(Request.java:2834)
    at org.apache.catalina.connector.Request.getParts(Request.java:2735)
    at org.apache.catalina.connector.RequestFacade.getParts(RequestFacade.java:795)
    at javax.servlet.http.HttpServletRequestWrapper.getParts(HttpServletRequestWrapper.java:326)
    at javax.servlet.http.HttpServletRequestWrapper.getParts(HttpServletRequestWrapper.java:326)
    at javax.servlet.http.HttpServletRequestWrapper.getParts(HttpServletRequestWrapper.java:326)
    at

 

해결 과정

1. 저장공간 확인

현재 EC2 위에서 백엔드 서버가 돌아가고있어서 콘솔로 접근해서 서버 저장공간을 확인해보자

  System load:                      0.21630859375
  Usage of /:                       99.9% of 28.89GB
  Memory usage:                     62%
  Swap usage:                       18%
  Processes:                        112
  ...

  => / is using 99.9% of 28.89GB

 

99.9% 사용중인걸 발견.. 로그 관리를 안했더니 이런 대참사가 일어났다.

이 서버에서는 Spring Boot, Kafka, Redis, MongoDB 모두 Docker로 띄워놓고 있어서 사용하지 않은 도커 이미지 및 컨테이너를 삭제해야겠다.

 

2. 불필요한 Docker 이미지 및 컨테이너 삭제

docker system prune -a

 

3. 삭제 후 저장공간 확인

  System load:                      0.22607421875
  Usage of /:                       27.9% of 28.89GB
  Memory usage:                     46%
  Swap usage:                       28%
  Processes:                        118

 

99.9% 에서 무려 27.9%로 감소했다!!

 

근데 사용하지 않는 도커 컨테이너랑 이미지를 주기적으로 삭제해야겠다고 생각해서

cron으로 2주마다 일요일 오전 3시에 ` docker system prune -a ` 명령어를 실행하도록 설정해야겠다.

 

---

cron으로 docker prune 명령어 주기적으로 실행하기

1. 크론탭 편집

` crontab -e `

 

2. 크론탭 파일에 작업 추가

2주마다 일요일 오전 3시에 명령이 실행되도록 설정했다.

0 3 */14 * * /usr/bin/docker system prune -a --force