InnerWeb
Přejít na obsah

Úspory: automatické testy místo ručních přejímek

Každá aktualizace bezpečnostního systému vyžaduje přejímku: někdo musí ověřit, že přihlášení, povolení a mapy stále fungují. Ukazujeme, kolik hodin ruční přejímky může nahradit sada 242 testů E2E, jak to spočítat na předpokladech provozovny a co automat nenahradí.

242
testů E2E ve 31 souborech
13
defektů nalezených při přepisu scénářů
360 h
úspora ročně v příkladném výpočtu
Zdroj: příkladný výpočet

Co zahrnuje sada automatických testů

Sada prohlížečových testů E2E obsahuje 242 testů v 31 souborech a spouští skutečný prohlížeč Chromium na skutečném backendu. Testy napodobují uživatele: přihlášení, administrační panel, plánování prací, povolení k práci, hlášení, dokumentaci, mapy a analytiku. Jde o stejný rozsah, který ruční přejímající prochází po každém vydání.

Testovací databáze se obnovuje z migrací jednou za běh testů, takže výsledek nezávisí na datech z předchozího spuštění. Taková přejímka je opakovatelná: dvě spuštění stejné verze dají stejný výsledek, což u ruční přejímky zaručit nelze.

Odkud pocházejí scénáře?

Scénáře ručních testerů z nahrávek relací (červen až září 2026) byly přepsány do automatických testů. Při přepisu se našlo 13 defektů aplikace, takže přepisování bylo zároveň formou auditu.

Jak dlouho běh trvá a kdy se spouští

Celá sada E2E trvá přibližně 2 až 2,5 hodiny, proto se spouští ručně na vyžádání a automaticky o víkendech o půlnoci, bez blokování sloučení změn. Tým provozovny tak nečeká na výsledek během pracovního dne.

Paralelní režim zkracuje čas téměř lineárně, ale každá testovací instance potřebuje vlastní databázi a vlastní Redis. To je náklad infrastruktury na straně dodavatele, který je třeba zohlednit, pokud objednatel chce kratší běh.

Hodiny přejímky jednoho vydání

Hodiny přejímky jednoho vydáníGraf před a po: 40 hodin ruční přejímky jednoho vydání oproti 10 hodinám s automatem.010203040hodinRuční přejímka: Jedno vydání: 40 hodin40 hodinRuční přejímkaS automatem: Jedno vydání: 10 hodin10 hodinS automatem
Zdroj: Příkladný výpočet na předpokladech z části Výpočet

Výpočet: kolik hodin nahradí automat

Níže uvedený výpočet vychází z předpokladů, které může provozovna nahradit vlastními čísly. Doba ruční přejímky jednoho vydání závisí na počtu cest, které provozovna považuje za kritické, a ne na počtu testů v sadě.

Příklad: provozovna předpokládá, že úplná ruční přejímka jednoho vydání trvá 40 hodin práce a po zavedení automatu lidé věnují 10 hodin přejímce cest nepokrytých testy a vyhodnocení výsledku. Při 12 vydáních ročně činí úspora 360 hodin.

Co automat nenahradí

Automat nenahradí posouzení použitelnosti ani kontrolu nové funkce, pro kterou test ještě neexistuje. Nenahradí ani návštěvu haly a kontrolu zařízení, jako jsou vysílače nebo mobilní zařízení. Proto v kalkulaci ponecháváme 10 hodin lidské přejímky.

Co se známou chybou?

Známá, dosud neopravená chyba se v testu označí jako očekávané selhání s číslem hlášení, nikdy přeskočením testu. Po opravě test sám oznámí, že anotaci je třeba odstranit. Přejímající tak vidí seznam známých problémů místo překvapení.

Proč nestačí jednotkové testy

Spuštění prohlížečových testů E2E po opravě zachytí chybu viditelnou pro uživatele, kterou jednotkové testy nezachytí, protože běží na atrapě API. Úsporu proto počítáme u přejímek, které dříve prováděl člověk u obrazovky, a ne u jednotkových testů.

Při přepisu scénářů bylo sedm z 13 defektů opraveno do dvou dnů a jejich testy se staly běžnými regresními testy. Každá opravená chyba tak zůstává pod ochranou, což v čase snižuje počet hodin potřebných na přejímku.

Defekty z přepisu scénářů

Defekty z přepisu scénářůKruhový graf: 7 z 13 defektů opraveno do dvou dnů, 6 zůstává.Opraveno do 2 dnů: 7 defektů (53,8%)Zbývající: 6 defektů (46,2%)13defektůOpraveno do 2 dnů7 defektů (53,8%)Zbývající6 defektů (46,2%)
Zdroj: a
Příklad výpočtu

Úspora hodin přejímky ročně

Předpoklady
ParametrHodnota
Vydání v roce12 vydání
Ruční přejímka jednoho vydání40 hodin
Přejímka s automatem jednoho vydání10 hodin

Výsledek: (40 − 10) × 12 = 360 hodin ročně. Vynásobeno vlastní hodinovou sazbou provozovny dává roční úsporu v penězích.

Poznámka: Příkladný výpočet na předpokladech autora stránky, není výsledkem měření. Provozovna dosadí vlastní počet vydání a hodin přejímky.

Videomateriál

Často kladené otázky

Stačí 242 testů k přejímce celého systému?

Pokrývají přihlášení, administrační panel, plánování prací, povolení, hlášení, dokumentaci, mapy a analytiku. Nové funkce a zařízení v hale vyžadují další kontrolu.

Blokují testy sloučení změn?

Ne. Celá sada trvá přibližně 2 až 2,5 hodiny, takže se spouští na vyžádání a o víkendech o půlnoci, bez blokování sloučení.

Běží test na atrapách dat?

Ne. Spouští skutečný prohlížeč na skutečném backendu a databáze se obnovuje z migrací.

Spočítejte úspory na vlastních předpokladech

Zadejte počet vydání a hodin přejímky ve vaší provozovně a spočítáme, kolik práce nahradí automat. Domluvte si schůzku s InnerWeb.

Pojďme si promluvit