우당탕탕 시스템 장애 회고록

장애 증상 kubectl 명령어가 먹지 않았다 AWS 콘솔에서 클러스터 노드를 확인해 봤는데 알 수 없음 상태로 나와 노드가 죽었다는 것을 확인할 수 있었다. 자동으로 노드가 다시 생성되어도 다시 자꾸 죽었다. node_failure 원인 확인 특정 pod가 생성

DB Connection이 자꾸 끊기는 에러 발생AWS의 RDS for PostgreSQL을 사용하는데, 자꾸 RDB와의 커넥션이 끊긴다HikariPool이 뜨는 것으로 보아 JPA 에러인것 같다PostgreSQL에서 감당할 수 있는 Connection 수보다 Micr