Umfang des Verkehrs: Der Heartbeat dominiert die API
Der Heartbeat ist ein zyklisches Signal des Geräts, das der Server annimmt, mit einer Funkbake verknüpft und speichert. Da sich jedes Gerät regelmäßig meldet, erzeugt dieser Endpunkt den größten Teil des API-Verkehrs. Auf einer Testinstanz unter dem Demo-Generator betrug dieser Anteil 96 % der Anfragen, im Produktivbetrieb etwa die Hälfte.
Für den Datenbankadministrator bedeutet das, dass die Leistung der gesamten API stark von einer einzigen Abfrage abhängt. Die Optimierung dieser Abfrage bringt mehr als die Feinabstimmung von zehn selten aufgerufenen.
Index auf dem Paar major und minor
Bei jedem Heartbeat sucht das System die Funkbake über das Paar major und minor. Ohne Index durchsucht diese Suche die gesamte Tabelle. Das Hinzufügen eines Index auf diesem Paar senkte die Zahl der gelesenen Zeilen pro Heartbeat von 3 665 auf 1 928 bis 2 205, weil die Suche nach der Funkbake nicht mehr die gesamte Tabelle durchsucht.
Das ist eine Verringerung um etwa 40 bis 47 % (von 3 665 auf einen Bereich von 1 928 bis 2 205 Zeilen) bei gleichen Ergebnissen. Bei einem Verkehr in Tausenden von Meldungen pro Stunde summiert sich der Effekt zu einem spürbaren Unterschied in der Last.
So überprüfen Sie den Effekt bei sich
Messen Sie vor dem Hinzufügen des Index die durchschnittliche Zahl der gelesenen Zeilen pro Heartbeat und die Antwortzeit des Endpunkts. Messen Sie danach dasselbe bei vergleichbarem Verkehr. Ein Vergleich bei einer anderen Verkehrsdichte ergibt keinen Sinn, verwenden Sie daher denselben Generator oder dasselbe Zeitfenster.
Was der Index kostet
Jeder Index belegt Speicherplatz und verlangsamt das Schreiben. Bei einer Tabelle, die ständig wächst, ist dieser Preis deutlich sichtbar. Der Index auf dem Paar major und minor beschleunigt die Suche nach der Funkbake, löst aber nicht das Problem einer wachsenden Telemetrietabelle. Dieses gesonderte Thema behandeln wir in den Empfehlungen zur Aufbewahrung.
Zeilen pro Heartbeat: vor und nach dem Index
Wartungsfenster
Das Hinzufügen eines Index zu einer großen Tabelle belastet die Datenbank und kann je nach Engine Schreibvorgänge blockieren. Planen Sie es in einem Wartungsfenster mit dem geringsten Verkehr, am besten nach einer Schicht, wenn die Geräte auf den Ladegeräten liegen und sich seltener melden.
Erstellen Sie vor dem Fenster eine Sicherungskopie und legen Sie ein Kriterium für das Zurücknehmen der Änderung fest. Vergleichen Sie nach dem Fenster die Zahl der gelesenen Zeilen pro Heartbeat mit dem Wert vor der Änderung.
- Die aktuelle Zahl der gelesenen Zeilen pro Heartbeat und die Antwortzeit messen.
- Eine Sicherungskopie der Datenbank erstellen und ihre Wiederherstellbarkeit prüfen.
- Den Index auf dem Paar major und minor im Wartungsfenster hinzufügen.
- Dieselben Werte bei vergleichbarem Verkehr messen.
- Die Ergebnisse in der Dokumentation der Installation festhalten.
Skalierung der Geräteflotte
Wenn Sie die Zahl der Geräte mehrfach erhöhen möchten, steigt der Heartbeat-Verkehr proportional, und die Tabelle wächst schneller. Bei einer Installation erreichte die Heartbeat-Tabelle nach zwei Jahren 73,9 Mio. Zeilen und 6,2 GB. Bei einer um eine Größenordnung größeren Flotte wird die Wachstumsrate deutlich höher sein.
Planen Sie deshalb vor der Skalierung drei Dinge parallel: Indizes für die Suche nach Funkbaken, eine Aufbewahrungsrichtlinie für die Telemetrietabelle und die Überwachung der Zahl der gelesenen Zeilen pro Heartbeat. Der erste Punkt senkt die Kosten einer einzelnen Meldung, der zweite begrenzt die Größe, der dritte liefert eine frühe Warnung.
Denken Sie außerdem daran, dass der Heartbeat eine Abfrage mit großem Anteil am Verkehr ist, daher sollte die Messung nach jeder Änderung des Datenbankschemas oder der Zahl der Geräte wiederholt werden.
Anteil der Heartbeats an den API-Anfragen auf der Testinstanz unter dem Demo-Generator
Videomaterial
Häufig gestellte Fragen
Warum erzeugt der Heartbeat so viel Verkehr?
Jedes Gerät meldet sich zyklisch, daher wächst die Zahl der Meldungen mit der Zahl der Geräte. Auf der Testinstanz unter dem Demo-Generator sind es 96 % der Anfragen, im Produktivbetrieb etwa die Hälfte.
Um wie viel senkt der Index die Last?
Die Zahl der Zeilen, die pro Heartbeat gelesen werden, sank von 3 665 auf 1 928 bis 2 205, weil die Suche nach der Funkbake nicht mehr die gesamte Tabelle durchsucht.
Wann sollte man den Index anlegen?
Im Wartungsfenster mit dem geringsten Verkehr, nach einer Sicherungskopie und mit Messung vorher und nachher bei vergleichbarem Verkehr.
Löst der Index das Problem der Tabellengröße?
Nein. Er beschleunigt die Suche, aber die Tabelle wächst weiter. Die Größe begrenzt eine Aufbewahrungsrichtlinie, über die der Kunde entscheiden muss.
Skalieren Sie eine Flotte von Ortungsgeräten?
Wir gehen mit Ihrem Datenbankadministrator die Indizes und das Wartungsfenster durch, bevor der Verkehr wächst. Vereinbaren Sie ein Gespräch mit dem Team von InnerWeb.
Sprechen wir