Rush Hour
Der Shop überlebt die Black Friday Nacht und ich kann es beweisen.
So hält der Shop den Ansturm
Der Beweis
Das Problem
Alle kommen gleichzeitig. Dazu ein riskantes Update und ein langsamer Zahlungsdienst.
- Banken am Zahltag
- Ticketverkauf beim Konzert Drop
- Logistik vor Weihnachten
Probier es selbst
Du bist die Verkaufsnacht. Schick den Ansturm, spiel ein fehlerhaftes Update ein, lass einen Server ausfallen. Der Shop hält.
Probier es aus: folge den goldenen Hinweisen.
0 Bestellungen in dieser Nacht
Im Browser nachgebaut mit den Werten aus dem echten Testlauf: Update nach 45 s zurückgenommen, Zahlung 65 s gestört, Spitze 696 Bestellungen pro Minute. Der echte Code mit Kubernetes, Argo Rollouts und Grafana liegt auf GitHub.
Wenn etwas schiefgeht
- Notbremse für Zahlungen: Zahlung hängt, die Bestellung wartet statt zu scheitern
- Rückerstattung: zu spät bezahlte Bestellungen bekommen ihr Geld zurück
- Aufräumen: hängende Bestellungen löschen, Ware wieder freigeben
Game Day
6 Minuten Verkaufsnacht, simuliert. Mit absichtlich kaputtem Update und Zahlungsausfall mittendrin.
- Mitternacht: Ansturm auf den Shop
- Fehlerhaftes Update wird eingespielt
- Das System nimmt es automatisch zurück
- Zahlung langsam, Bestellungen warten 65 Sekunden
- Alle wartenden Bestellungen danach bezahlt
Der Checkout verfehlte sein Verfügbarkeitsziel (98,1 % statt 99,5 %). Genau dafür ist das Fehlerbudget da. Der Catalog blieb bei 100 %.
- Python
- FastAPI
- PostgreSQL
- Redis
- Kubernetes
- Helm
- Prometheus
- Grafana
- GitHub Actions
- Argo Rollouts
- Terraform
- k6