may 30 장애 로그

2019-05-29 10시 ~ 14시

2019-05-29 10시 ~ 20시 17시 30분경 장애 원인 찾아서 패치함

 

장애 내용

1. 주문 받는 서버에 에러가 10시간 넘게 났음

2. 주문 받는 서버에 call이 늘어나는 문제가 있었음

 

배포 기록

2019-05-29 09:52:00에 주문 받는 서버 배포가 있었음

2019-05-29 10:53:00에 주문 받는 서버에 네트웍 트래픽이 증가함

 

장애 원인

1. firebase url이 잘못됨

2. 1로 인해 주문이 안들어가는 문제가 있었음

- 왜냐하면 firebase에 update를 한 후에 주문이 들어가게 되어있는데 firebase에 update할때 에러가 나서 뒤에 코드가 타지 않음

3. cancel이 안되는 문제

4. 3으로 인해 cancel이 안되어서 잔액이 부족함

5.서버에 에러로그가 남기고 알림이 10시간 정도 옴

6. 3은 order의 메세지를 수정했기 때문에 발생 했음

7. 주문을 받는 서버에 call이 늘어나는 문제가 있었음