InnerWeb
Zum Inhalt springen

Checkliste für die Anbieterprüfung: Wartung und Entwicklung

Die jährliche Prüfung des Anbieters eines Sicherheitssystems soll zeigen, ob Wartung und Weiterentwicklung wie vereinbart verlaufen. Die Checkliste deckt Tests, Änderungskontrolle, Fehlerüberwachung, Meldungen und Funktionsentwicklung ab, und ein Kommentar bei jeder Gruppe erklärt, welchen Nachweis man verlangen sollte.

242
E2E-Tests im Paket
5.000
Fehler monatlich im gemeinsamen Budget
2
Kontrollrunden für Änderungen

Ziel und Vorbereitung der Prüfung

Die Prüfung des Anbieters sollte eine Frage beantworten: Hat das Werk Nachweise dafür, dass das System kontrolliert gewartet und weiterentwickelt wird? Laden Sie zur Prüfung die IT-Abteilung, die Leitung Arbeitsschutz und den Einkauf ein, denn jede dieser Rollen schaut auf einen anderen Bereich.

Bitten Sie den Anbieter vor dem Termin um drei Dokumente: eine Liste der Releases mit Versionsnummern, eine Liste der Meldungen mit Reaktionszeiten und das Ergebnis des letzten vollständigen Testlaufs. Das System wird im Abonnement mit einmaligen Einführungskosten angeboten. Die Prüfung ist daher auch eine gute Gelegenheit, den Leistungsumfang des Abonnements mit dem tatsächlich genutzten zu vergleichen.

Tests und Abnahmen

Die erste Gruppe betrifft die Frage, wie der Anbieter seine Software prüft. Das Paket der browserbasierten E2E-Tests umfasst 242 Tests in 31 Dateien und startet einen echten Chromium-Browser auf einem echten Backend. Das Werk sollte fragen, wie viele Tests derzeit im Paket sind, wann der letzte vollständige Lauf stattfand und wie das Ergebnis war.

Der vollständige Satz dauert etwa 2 bis 2,5 Stunden und läuft auf Anforderung sowie automatisch an den Wochenenden um Mitternacht. Bitten Sie um den Verlauf der Läufe der letzten Monate: Die Regelmäßigkeit der Läufe sagt mehr über die Disziplin des Anbieters aus als ein einzelnes grünes Ergebnis.

Bekannte Fehler und Regressionstests

Ein bekannter, noch nicht behobener Fehler wird im Test als erwartetes Fehlschlagen mit Meldungsnummer markiert, niemals durch Überspringen des Tests. Bitten Sie um eine Liste solcher Markierungen: Ihre Länge und ihr Alter zeigen, wie schnell der Anbieter bekannte Probleme beseitigt.

Zahlen für den Vergleich in der Prüfung

Zahlen für den Vergleich in der PrüfungSäulendiagramm: 242 E2E-Tests, 31 Testdateien und ein Limit von 21 Ereignissen pro Stunde und Fehlerart.050100150200250WertE2E-Tests: 242 Wert242 WertE2E-TestsTestdateien: 31 Wert31 WertTestdateienLimit Ereignisse pro Stunde und Fehlerart: 21 Wert21 WertLimit Ereignisse pro Stundeund Fehlerart
Quelle: und

Änderungskontrolle

Die zweite Gruppe betrifft den Weg von der Änderung bis zur Auslieferung. Jede Änderung im Repository durchläuft statische Analyse, Stilprüfung und Unit-Tests, und das Zusammenführen ist bis zum grünen Ergebnis gesperrt. Fragen Sie, ob diese Regel ohne Ausnahmen gilt und wie der Anbieter Ausnahmen dokumentiert, falls es sie gibt.

Die Dokumentation beschreibt außerdem einen unabhängigen Kontroll-Agenten, der die Übereinstimmung der Änderung mit der Beschreibung und den fachlichen Regeln prüft, mit drei Befundklassen (blockierend, gewichtete Warnungen, Empfehlungen) und einem Limit von zwei Runden. Dieser Mechanismus ist als entworfen und gebaut beschrieben, im Stand von August 2026 aber noch nicht produktiv eingeführt. Fragen Sie den Anbieter nach dem aktuellen Stand, statt anzunehmen, dass er läuft.

Fehlerüberwachung und Meldungen

Die dritte Gruppe betrifft, was der Anbieter nach der Einführung sieht. Alle Instanzen melden unbehandelte Ausnahmen an ein gemeinsames Fehlerüberwachungsprojekt, und das monatliche Budget von 5.000 Fehlern ist eine gemeinsame Ressource. Fragen Sie, wie der Anbieter dieses Budget überwacht und was er tut, wenn eine Instanz zu viele Ereignisse erzeugt.

Das Limit beträgt 21 Ereignisse pro Stunde und Fehlerart. An einem Tag ohne Vorfälle lag der höchste Wert bei 305 Ereignissen (etwa 12,7 pro Stunde), eine Schleifenstörung erreichte 180 pro Stunde. Bitten Sie um Daten des letzten Jahres: Anzahl der Tage mit Überschreitung des Limits und Art der Behandlung jedes dieser Tage.

Gehen Sie die Meldungsliste des Werks durch: Reaktionszeiten, Behebungszeiten und wiederkehrende Themen. Ein wiederkehrendes Thema ist ein Signal, eine Korrektur an der Quelle zu bestellen, statt es mit Meldungen zu bearbeiten.

Weiterentwicklung von Funktionen und Zusammenfassung

Die vierte Gruppe betrifft neue Funktionen. Prüfen Sie, welche Bestellungen des letzten Jahres umgesetzt wurden, in welcher Version und mit welchem Testergebnis. Fragen Sie, wie der Anbieter das Risiko weiterer Änderungen bewertet und was er im nächsten Jahr plant.

Vergleichen Sie zum Schluss die Kosten mit dem Nutzen: Abonnement, Wartung der Sender, Miete mobiler Geräte und Entwicklung. Halten Sie die Ergebnisse der Prüfung fest: was der Anbieter verbessern soll, bis wann und wer im Werk das kontrolliert. Eine Aktualisierung auf Seiten InnerWeb tauscht keine Leser oder Karten des Kunden aus, daher sind in der Prüfung keine Kosten für Hardware der Zutrittskontrolle zu suchen, die durch die Software entstehen.

Checkliste

Videomaterial

Häufig gestellte Fragen

Wie oft soll die Anbieterprüfung stattfinden?

Einmal im Jahr, nach einem schweren Ausfall zusätzlich. Der Jahresrhythmus passt zur Abrechnung des Abonnements und zur Planung der Entwicklung.

Wer sollte an der Prüfung teilnehmen?

Die IT-Abteilung, die Leitung Arbeitsschutz und der Einkauf. Die IT bewertet Tests und Überwachung, der Arbeitsschutz Funktionen und Alarme, der Einkauf Kosten und Vertrag.

Muss der Anbieter die Testergebnisse offenlegen?

Es lohnt sich, diese Pflicht in den Vertrag aufzunehmen. Das Ergebnis des vollständigen E2E-Laufs ist der wichtigste Nachweis für die Aufrechterhaltung der Qualität.

Führen wir die jährliche Prüfung gemeinsam durch

Gern gehen wir mit Ihnen die jährliche Prüfung durch: Tests, Änderungen, Fehler und Entwicklung. Vereinbaren Sie ein Gespräch mit InnerWeb.

Sprechen wir