EP19
PORT EXHAUSTION
안쪽은 멀쩡한데, 밖으로 나가는 연결만 사라진다
수요일 20:40, 타임딜 푸시가 나간 지 10분. 외부 PG로 나가는 결제 승인 호출이 4% 실패한다. 전부 connect timeout이다. 서비스끼리의 내부 호출은 멀쩡하고, PG사는 자기들 쪽은 정상이라고 한다. 연결이 어디서 사라지는지 찾아 21:00 2차 푸시 전에 막고, 엇갈린 결제까지 맞춰야 한다.
에피소드 정보
- 장애 발생 시각
- 20:40
- 플레이 시간
- ~12분
- 선택지
- 51개
- 조사할 단서
- 13개
- 엔딩
- 7개
함께 대응하는 동료
- 배지호 · 플랫폼팀 SRE
비용 최적화 작업을 맡고 있다. 실수를 숨기지 않는다 - 한도윤 · 결제플랫폼팀 팀장
말수가 적고 침착하다. 숫자와 근거로 판단하길 원한다 - 서지안 · 결제플랫폼팀 백엔드 개발자
결제 승인 로직 담당. 문제의 PR을 리뷰했다 - 남다은 · CS팀 리드
고객 문의를 숫자로 정리해 직접 들고 온다
플레이하려면 회원가입과 로그인이 필요합니다.