HealthWatch und ECC: Fehler erwischen, die Ihr Server nicht meldet

Server fallen nicht nur laut aus. Sie fallen auch leise aus. Ein Bit kippt in einem DRAM-Modul, eine Prüfsumme auf der Platte driftet, ein Netzwerkpuffer wird korrupt. Auf Consumer-Hardware passieren solche Ereignisse und niemand bemerkt es. In einem Labor kann ein gekipptes Bit ein falsches Ergebnis in einem unterschriebenen Bericht bedeuten.

Deshalb setzen regulierte Labore ECC-Speicher ein. RAM, der Single-Bit-Fehler on-the-fly erkennt und korrigiert und Multi-Bit-Fehler meldet, statt Daten still zu korrumpieren. Und deshalb liefert HealthWatch, unsere Monitoring-Schicht für SENAITE, jetzt eine ECC-Sonde in seinem Monitor-Set aus.

Was die Sonde prüft

Für jeden SENAITE-Host inspiziert HealthWatch die Speicherkonfiguration der Plattform und meldet, ob die installierten DIMMs ECC-fähig sind und ob der Memory Controller ECC aktiv hat.

Sie verfolgt die Rate der korrigierten Single-Bit-Fehler. Eine steigende Rate deutet auf ein DIMM, das ausfällt. Sie zeigt auch unkorrigierbare Fehler, die das OS als Machine Check loggen und im besten Fall den betroffenen Prozess anhalten.

Die Werte fließen in dasselbe Dashboard wie ZODB-Größe, Backup-Alter und Plattenwachstum. Ein ausfallendes DIMM erscheint als rote Kachel, bevor es ein korrumpiertes Ergebnis wird.

Warum das in einen LIMS-Ops-Stack gehört

Die meisten Infrastruktur-Teams monitoren CPU und Platte bereits. Speichergesundheit ist der blinde Fleck. Sie ist in Cloud-Dashboards unsichtbar, sie steht nicht in der Uptime-Metrik, und ihre Symptome (gelegentlich falsche Zahlen, gelegentliche Segfaults) werden monatelang der Applikationsschicht angelastet.

Für Labore mit ISO 17025, GxP oder vergleichbaren Standards ist “unser Server hatte einen Speicherfehler” keine verteidigungsfähige Antwort auf “warum stand da 4,2 mg/L, als die Probe 42 war?”. Kontinuierliches ECC-Monitoring ist ein kleines Infrastrukturstück, das sich beim ersten Alarm bezahlt macht.

Wie Sie es bekommen

Die ECC-Sonde ist im aktuellen HealthWatch-Release enthalten. Wenn Sie HealthWatch bereits auf Ihren SENAITE-Hosts laufen haben, zieht ein Update sie mit. Wenn nicht, ist jetzt der richtige Zeitpunkt, sich anzuschauen, was es abdeckt. Die SENAITE Care-Seite beschreibt das komplette Monitor-Set.