IL-0377 Upstash · 2026-05-01database

QStash US 리전에서 예약 작업의 상태가 어긋나 일정이 사라지거나 되살아나고 두 번 실행됐다

Upstash 는 확장성 개선 작업의 하나로 US 리전의 QStash 예약 인프라를 새 아키텍처로 바꿨다. 전환하는 동안 새 예약 인프라가 일정 상태의 기준이 됐고, 옛 실행 경로는 폴백용으로 코드에 남아 있었다. 5월 1일 버그 때문에 시스템이 뜻하지 않게 트래픽을 옛 예약 경로로 되돌렸다. 옛 경로는 새 시스템과 따로 일정 변경을 받기 시작했고, 두 시스템의 상태가 갈라졌다. 그 결과 4월 24일부터 5월 1일 사이에 일정을 만들거나 고치거나 멈추거나 지운 일부 사용자의 일정 상태가 어긋났다. 변경이 반영되지 않거나, 멈춘 일정이 다시 돌거나, 지운 일정이 다시 나타나거나, 새 일정이 실행되지 않았고, 일부 작업은 두 번 실행됐다. 영향받은 사용자는 US 리전의 일부였고, 대부분의 일정은 장애 내내 정상으로 돌았다.

Upstash 는 5월 5일 14:24 UTC 에 문제를 알리고 마이그레이션이 끝나면 영향받은 일정이 정상으로 돈다고 했다. 원인을 찾은 뒤 새 예약 시스템을 다시 기준으로 세우고, 옛 시스템과 새 시스템의 데이터를 맞추고, 빠진 일정 변경을 새 인프라에 다시 넣고, 충돌을 풀었다. 데이터를 영영 잃지 않도록 일부 경우에는 멈췄거나 지웠던 일정을 되살렸다. 15:44 UTC 에 수정을 적용하고 지켜봤고, 21:31 UTC 에 주요 일정 기능이 정상으로 돌아왔다. 앞서 만든 일정이 제대로 전달되는지 확인한 뒤 5월 6일 08:05 UTC 에 해결로 닫았다.

심각도

–

영향 범위

QStash schedules in the US region of users who created, edited, paused or deleted schedules between 24 April and 1 May 2026: updates not applied, paused schedules active again, deleted schedules back, new schedules not running, some jobs executed twice

영향 사용자

A limited number of users in the US region

지역

US region (US-EAST-1)

감지까지

–

복구까지

–