Scénář: hodiny bez spojení na hale
Představme si závod, v jehož hale vypadne Wi-Fi a signál mobilní sítě GSM je slabý. Zaměstnanci i návštěvníci mají v telefonech aplikaci a na pozadí probíhají události: vstupy do zón, potvrzení povolení, hlášení, záznamy docházky. Jde o modelový scénář, nikoli o zprávu z konkrétního závodu.
Mobilní aplikace funguje offline a ukládá data, která se na server dostanou po obnovení spojení. Na straně serveru to znamená, že události nepřicházejí rovnoměrně, ale v dávkách: několik desítek až několik stovek telefonů může odeslat zaostalé záznamy ve stejné čtvrthodině.
Co dělá telefon, když není síť
Telefon nečeká na server. Událost si uloží lokálně spolu s časem jejího vzniku a pokračuje dál. Pro zaměstnance to znamená plynulou práci s aplikací, pro správce jeden důležitý předpoklad: čas události je čas z telefonu, čas přijetí je čas serveru. Oba údaje je nutné uchovávat odděleně.
Díky tomu je v zápisu po výpadku vidět jak okamžik události, tak zpoždění doručení. To je základ pro rozhovor s auditorem, když se ptá, kdy přesně pracovník potvrdil seznámení s povolením.
Příkladový příliv zaostalých událostí po návratu spojení
Co se děje na serveru po návratu spojení
Server musí přijmout dávky zaostalých událostí po výpadku. To znamená krátkou, ale ostrou špičku provozu: mnoho telefonů získá síť najednou a každý odešle svou frontu. Vrstva aplikace nesmí předpokládat, že události přicházejí postupně a jen jednou.
Osvědčeným postupem je oddělit přijetí od zpracování. Přijetí má být rychlé a odolné vůči opakování, náročné přepočty mohou jít do fronty na serveru. Z tohoto důvodu se při dimenzování vyplatí zkontrolovat pomocné služby zásobníku, včetně Redis, o kterém pojednává samostatná stránka o pomocných službách.
- Přijímání dávek bez blokování rozhraní pro ostatní uživatele.
- Odolnost vůči opětovnému odeslání stejné dávky z telefonu.
- Zachování pořadí událostí podle času události, nikoli času přijetí.
- Srozumitelné hlášení uživateli o stavu synchronizace.
Příkladová špička: kalkulace s předpoklady
Následující kalkulace je příkladová a slouží k přepočtu vlastních hodnot. Předpoklady: 300 telefonů na hale, přerušení 3 hodiny, průměrně 20 událostí na telefon za hodinu, návrat spojení rozložený do 15 minut. Čísla jsou předpoklady, nikoli měřením v konkrétním závodě.
Pro tyto předpoklady činí zaostalost 300 krát 3 krát 20, tedy 18 000 událostí. Rozloženo do 15 minut to dává průměrně 20 událostí za sekundu, přičemž okamžitá špička může být několikanásobně vyšší. Jde o hodnotu, kterou zvládne typická instalace na jednom serveru, pokud je přijetí událostí lehké a nevykonává těžké dotazy ve stejné transakci.
Co zkontrolovat na straně infrastruktury
Před spuštěním by měl správce na předprodukci provést zkoušku přerušení: odpojit skupinu telefonů od sítě na několik hodin, sbírat události a poté spojení obnovit najednou. Výsledkem zkoušky je doba úplného vyprázdnění front a zatížení serveru v době špičky.
- Limity spojení a časů odezvy na styčném bodu s aplikačním firewallem.
- Volné místo na disku databáze pro případ většího přílivu.
- Rezerva paměti pro pomocné služby v okamžiku špičky.
- Monitoring délky fronty a zpoždění doručení událostí.
Závěry pro správce
Výpadek spojení není selhání systému, ale projektová situace. Telefon ukládá do fronty, server přijímá dávky a správce měří špičku na předprodukci dříve, než nastane doopravdy. Stojí za to tento případ srovnat s popisem styčného bodu a zón sítě, protože právě tam se první spojení obvykle zadrhnou.
Videomateriál
Často kladené otázky
Přijdou události z období offline nazmar?
Ne, mobilní aplikace data ukládá do fronty a odešle je na server po obnovení spojení. Podmínkou je, že telefon se mezitím nevymaže ani neodinstaluje.
Jak odlišit čas události od času nahlášení?
Telefon ukládá okamžik události lokálně a server zaznamenává okamžik přijetí. Oba časy jsou potřebné v zápisu po výpadku.
Zvládne server vlnu zaostalých událostí?
Záleží na velikosti flotily a délce výpadku. Nejlépe to ověřit zkouškou na předprodukci, nikoli předpokládat předem.
Potřebuje systém samostatný server pro fronty?
Obvykle ne. Stačí ověřit rezervu zdrojů jednoho serveru a pomocných služeb v okamžiku špičky.
Zdroje
Ověřme špičku na vaší předprodukci
Spolu s IT týmem připravíme zkoušku přerušení spojení a měření vyprazdňování front dříve, než systém přejde na produkci.
Pojďme si promluvit