Účel a příprava přezkumu
Přezkum dodavatele má odpovědět na jednu otázku: má provozovna důkazy, že je systém udržován a rozvíjen kontrolovaným způsobem? Do přezkumu zvěte oddělení IT, vedoucího BOZP a nákup, protože každá z těchto rolí se dívá na jinou oblast.
Před schůzkou si od dodavatele vyžádejte tři dokumenty: seznam vydání s čísly verzí, seznam hlášení s dobou reakce a výsledek posledního úplného běhu testů. Systém se nabízí formou předplatného s jednorázovými náklady na nasazení, takže přezkum je také dobrá příležitost porovnat rozsah služeb v předplatném se skutečně využitým.
Testy a přejímky
První skupina se týká toho, jak dodavatel ověřuje svůj software. Sada prohlížečových testů E2E obsahuje 242 testů v 31 souborech a spouští skutečný prohlížeč Chromium na skutečném backendu. Provozovna by se měla zeptat, kolik testů je nyní v sadě, kdy proběhl poslední úplný běh a jaký byl jeho výsledek.
Celá sada trvá přibližně 2 až 2,5 hodiny a spouští se ručně na vyžádání a automaticky o víkendech o půlnoci. Vyžádejte si historii běhů za posledních několik měsíců: pravidelnost spouštění vypovídá o kázni dodavatele více než jediný zelený výsledek.
Známé chyby a regresní testy
Známá, dosud neopravená chyba se v testu označí jako očekávané selhání s číslem hlášení, nikdy přeskočením testu. Vyžádejte si seznam takových anotací: jejich počet a stáří ukazují, jak rychle dodavatel známé problémy odstraňuje.
Čísla k porovnání v přezkumu
Kontrola změn
Druhá skupina se týká cesty od změny k vydání. Každá změna v repozitáři prochází statickou analýzou, kontrolou stylu a jednotkovými testy a sloučení je zablokované, dokud výsledek není zelený. Zeptejte se, zda toto pravidlo platí bez výjimek a jak dodavatel dokumentuje výjimky, pokud nastanou.
Dokumentace popisuje také nezávislého agenta kontroly, který posuzuje, zda změna odpovídá popisu a doménovým pravidlům, se třemi třídami nálezů (blokující, vážená upozornění, návrhy) a limitem dvou kol. Mechanismus je popsán jako navržený a vytvořený, ale ke stavu z srpna 2026 zatím nenasazený do produkce, takže se zeptejte dodavatele na aktuální stav, namísto předpokladu, že funguje.
Monitoring chyb a hlášení
Třetí skupina se týká toho, co dodavatel vidí po nasazení. Všechny instance hlásí neodchycené výjimky do jednoho projektu monitoringu chyb a měsíční rozpočet 5 000 chyb je společný zdroj. Zeptejte se, jak dodavatel hlídá tento rozpočet a co udělá, když jedna instance vygeneruje nadbytek událostí.
Limit událostí chyb je 21 za hodinu u každého druhu chyby. V dnech bez incidentů dal nejhorší den 305 událostí (zhruba 12,7 za hodinu) a výpadek smyčky dosáhl 180 za hodinu. Vyžádejte si data za poslední rok: počet dnů s překročením limitu a způsob řešení každého z nich.
Přečtěte si seznam hlášení provozovny: doby reakce, doby vyřešení a opakující se témata. Opakující se téma je signál, že se má objednat oprava u zdroje, a ne řešit ji opakovanými hlášeními.
Rozvoj funkcí a shrnutí
Čtvrtá skupina se týká nových funkcí. Ověřte, které objednávky z posledního roku byly nasazeny, v jaké verzi a s jakým výsledkem testů. Zeptejte se, jak dodavatel hodnotí riziko dalších změn a co plánuje v příštím roce.
Na závěr porovnejte náklady s přínosem: předplatné, údržbu vysílačů, pronájem mobilních zařízení a rozvoj. Zapište závěry přezkumu: co má dodavatel zlepšit, do kdy a kdo z provozovny to ověří. Aktualizace na straně InnerWeb nevymění čtečky ani karty klienta, takže v přezkumu nehledejte náklady na hardware kontroly přístupu spojené s programovým vybavením.
Kontrolní seznam
Videomateriál
Často kladené otázky
Jak často provádět přezkum dodavatele?
Jednou ročně a po závažném výpadku navíc. Roční rytmus odpovídá vyúčtování předplatného a plánování rozvoje.
Kdo má být na přezkumu?
Oddělení IT, vedoucí BOZP a nákup. IT hodnotí testy a monitoring, BOZP funkce a alarmy, nákup náklady a smlouvu.
Musí dodavatel zpřístupnit výsledky testů?
Vyplatí se zapsat tuto povinnost do smlouvy. Výsledek úplného běhu E2E je základním důkazem udržení kvality.
Projděte přezkum s námi
Rádi s vámi projdeme roční přezkum: testy, změny, chyby a rozvoj. Domluvte si rozhovor s InnerWeb.
Pojďme si promluvit