장애 상황 우리 회사 적립금 소멸알림톡을 자동으로 전송시키기 위해 Google Cloud Pubsub을 이용하고 있다. 매일 오후 6시에 알림톡이 전송하는 api가 트리거 되도록 크론잡 돌려놨는데, 돌린 첫 날부터 subscription의 엔드포인트 ( api ) 에서 아래와 같은 에러를 미친듯이 내기 시작했다. 장애 원인 1. 4만 건 이상의 오류가 30분도 안되어 발생한 이유 저 날 적립금 소멸 알림톡 수신 대상자는 748명 밖에 되지 않았다. GCP에선 게시된 메세지가 제대로 소화되기 전까진 메시지 보관 기간동안 계속 시도한다. ( 심지어 알림톡 구독에서 메세지 보관날짜를 일주일, 실패 시 즉시 재시도 이렇게 설정해놨더라구...하하 ) 2. 엔드포인트( api )에서 JSONDecodeError: ..
