어느날 갑자기 평상시에 잘 작동하던 rabbitmq 서버가 갑자기 접속이 되지 않는 커넥션 오류를 마구 뿜어내기 시작했습니다. 다행히 운영이 아니라 테스트환경이었지만 커넥션 오류가 발생한 경우는 처음이었습니다. 기존에 잘 작동했던 시스템인데 커넥션 오류가 떠서 연계되어 있던 api 와 배치 서비스가 정상적으로 구동되지 않는 상황이었어요. 큐 서버의 대시보드를 확인하니 위 상황처럼 엄청난 큐가 쌓여있고 메모리도 설정된 수준을 넘어 full 로 차있는 상황이었습니다. 메세지 큐 서버의 커넥션 정보를 보니 모든 커넥션이 blocked 혹은 blocking 상태였어요. block 상태인 요청을 취소하고 다시 요청을 넣으면 connection 리스트에는 들어가지만 동일하게 blocked 이나 blocking ..
