사례1건

1건 중 1~1번째

1. IL-0377 QStash US 리전에서 예약 작업의 상태가 어긋나 일정이 사라지거나 되살아나고 두 번 실행됐다

   Upstash2026

   증상

   QStash US 리전에서 일부 사용자의 예약 작업이 이상하게 동작했다. 고친 일정이 반영되지 않았고, 멈춘 일정이 다시 돌았고, 지운 일정이 다시 나타났고, 새로 만든 일정이 실행되지 않았다.

   스플릿 브레인중복 전달과 중복 실행

   촉발

   5월 1일 버그 때문에 시스템이 트래픽을 새 예약 인프라에서 옛 실행 경로로 되돌렸다. 옛 실행 경로는 전환하는 동안 폴백으로 쓰려고 코드에 남겨 둔 것이었다.

   원인

   소프트웨어 결함

   구성 요소

   작업 예약 서비스

   기여 요인

   부분 배포

   조치

   • 새 예약 시스템을 다시 일정 상태의 기준으로 세웠다.
   • 옛 예약 시스템과 새 예약 시스템의 데이터를 맞췄다.
   • 빠진 일정 변경을 새 인프라에 다시 넣었다.
   • 사용자 데이터와 일정이 끊기지 않도록 두 시스템 사이의 충돌을 풀었다.
   • 데이터를 영영 잃지 않도록 일부 경우에는 멈췄거나 지웠던 일정을 되살렸다.

   후속 조치

   • 전환이 끝나면 더는 쓰지 않는 폴백 실행 경로를 지운다.
   • 시스템이 뜻하지 않게 폴백 경로로 넘어가면 막는 자동 장치와 알림을 더한다.
   • 시스템 사이의 일관성 검증을 강화한다.
   • 롤백과 데이터 맞추기 테스트를 넓힌다.

   사례 보기

원인별1