WatchZit

Linux- und Windows-Server ohne Agent überwachen, per SSH und WinRM

Auf manche Maschinen kommt kein Agent: eine Appliance, die Sie nicht verändern dürfen, ein Server eines Kunden, ein System, auf dem jedes installierte Paket einen Änderungsantrag braucht. WatchZit 1.4 liest solche Maschinen über das, was sie schon haben — SSH unter Linux, WinRM unter Windows — und überwacht sie mit denselben Triggern wie den Agenten. Diese Anleitung zeigt, was gemessen wird, was das Zielsystem braucht und wie Sie die Prüfung einrichten.

Was diese Anleitung behandelt

WatchZit ist ein kostenloses Open-Source-Überwachungssystem (AGPLv3) für Netzwerke und Server. Neben Ping-, SNMP-, Web- und Datenbankprüfungen gibt es einen kleinen Agenten für Windows und Linux. Seit Version 1.4 gibt es zwei Prüfungstypen, für die auf der Maschine nichts installiert werden muss: Linux über SSH (ohne Agent) und Windows über WinRM (ohne Agent).

Was gemessen wird

Beide Prüfungen lesen dieselben Werte von einer Maschine, auf der nichts installiert ist:

  • die CPU-Last (bei jedem Lauf über eine Sekunde gemessen),
  • den belegten Arbeitsspeicher,
  • den Swap unter Linux bzw. die Auslagerungsdatei unter Windows,
  • das vollste Laufwerk,
  • die Laufzeit (Uptime),
  • und unter Linux zusätzlich den Load.

Die Werte tragen dieselben Namen wie die Werte des Agenten. Deshalb wirken die eingebauten Trigger für CPU, Speicher und Laufwerke sowie Prognosen ohne weitere Einrichtung auch auf diese Prüfungen.

Einen Linux-Server vorbereiten (SSH)

WatchZit meldet sich per SSH an und führt einen festen Befehl aus, der nur /proc, df und uname liest. Auf dem Server wird nichts geschrieben.

  • Benutzer: Jeder Benutzer, der sich per SSH anmelden darf, genügt — kein root, kein sudo. Ein eigener Benutzer, zum Beispiel monitor, hält ihn von den Konten der Mitarbeiter getrennt.
  • Passwort oder privater Schlüssel: eines von beiden. Der Schlüssel darf im OpenSSH- oder PEM-Format vorliegen und keine Passphrase haben. WatchZit speichert Passwort oder Schlüssel verschlüsselt und zeigt sie nie wieder an.
  • Port: 22, sofern Sie keinen anderen angeben. Der WatchZit-Server (oder der Remote-Kollektor, der die Prüfung ausführt) muss ihn erreichen können.

Hostschlüssel: Vertrauen bei der ersten Verbindung

Bei der ersten Verbindung akzeptiert die Prüfung den Hostschlüssel des Servers und speichert ihn. Bei jedem weiteren Lauf wird der Schlüssel geprüft. Ändert er sich, fällt die Prüfung auf down und nennt den neuen Schlüssel — ein ausgetauschter Server oder eine abgefangene Verbindung bleibt so nicht unbemerkt. War die Änderung erwartet, etwa weil die Maschine neu installiert wurde, öffnen Sie die Prüfung, setzen das Häkchen bei Gespeicherten Hostschlüssel vergessen und den nächsten annehmen und speichern.

Wenn Sie sich nicht auf die erste Verbindung verlassen wollen, tragen Sie den Fingerabdruck selbst im Feld Hostschlüssel ein. Auf dem Server zeigt ihn dieser Befehl:

ssh-keygen -lf /etc/ssh/ssh_host_ed25519_key.pub

Das Feld erwartet einen SHA256-Fingerabdruck wie SHA256:…; leer bedeutet, dass der erste Schlüssel akzeptiert wird.

Einen Windows-Server vorbereiten (WinRM)

Unter Windows liest WatchZit WMI über WinRM. Bei Windows Server ist WinRM eingeschaltet; bei anderen Windows-Versionen schalten Sie es so ein:

winrm quickconfig
  • HTTP, Port 5985: WatchZit meldet sich mit NTLMv2 an und verschlüsselt jede Nachricht mit dem Anmeldeschlüssel, wie Windows es verlangt. Nichts geht im Klartext über das Netz, auch ohne Zertifikat.
  • HTTPS, Port 5986: braucht einen WinRM-HTTPS-Listener auf dem Server. TLS schützt die Nachrichten, und die Anmeldung ist an das Zertifikat gebunden (Channel Binding). Verwendet der Listener ein selbstsigniertes Zertifikat, setzen Sie das Häkchen bei Nicht vertrauenswürdige Zertifikate akzeptieren (selbstsigniert).
  • Benutzer: geschrieben als name, DOMAIN\name oder name@domain. Er muss Administrator sein oder Mitglied von Remote Management Users mit WMI-Rechten auf root\cimv2. Der zweite Weg ist für ein Überwachungskonto vorzuziehen. Das Passwort wird verschlüsselt gespeichert.

Die Prüfung in der Konsole anlegen

  1. Legen Sie die Maschine unter Geräte mit Namen und Adresse an, falls sie noch fehlt.
  2. Öffnen Sie die Geräteseite und klicken Sie auf Prüfung hinzufügen.
  3. Wählen Sie unter Typ Linux über SSH (ohne Agent) oder Windows über WinRM (ohne Agent).
  4. Füllen Sie Benutzername und Passwort aus. Für Linux können Sie statt des Passworts das Feld Privater Schlüssel ausfüllen und optional das Feld Hostschlüssel. Für Windows setzen Sie das Häkchen bei HTTPS (Port 5986), wenn Sie den HTTPS-Listener nutzen. Port ist in beiden Fällen optional: leer bedeutet 22 bzw. 5985 / 5986.
  5. Setzen Sie Intervall (Sekunden) und Zeitlimit (ms). Ein Lauf dauert einige Sekunden; geben Sie ihm daher ein Zeitlimit von mindestens 15 Sekunden (15000). Ein Intervall von einer Minute oder mehr genügt.
  6. Klicken Sie auf Prüfung hinzufügen. Nach dem ersten Lauf zeigt die Geräteseite die Werte, und die Diagramme füllen sich ab dann.

Wenn Sie die Prüfung später bearbeiten, lassen Sie das Passwortfeld leer, um das gespeicherte zu behalten.

Remote-Kollektoren: Eine Prüfung, die über einen Remote-Kollektor in einer Zweigstelle läuft, kann den Hostschlüssel nicht selbst speichern. Tragen Sie den Schlüssel in der Prüfung ein; bis dahin zeigt die Prüfung den Schlüssel, den der Kollektor gesehen hat, sodass Sie ihn vergleichen und übernehmen können.

Trigger und Prognosen

Da die Werte die Namen des Agenten tragen, überwachen die eingebauten Trigger unter Probleme → Trigger diese Prüfungen, sobald sie laufen:

  • Hohe CPU-Last und Speicher fast voll — über 90 % für 5 Minuten,
  • Laufwerk fast voll und Laufwerk voll — über 90 % bzw. 97 %.

Um gewarnt zu werden, bevor ein Laufwerk voll ist, legen Sie einen Trigger der Art Wert wird einen Schwellenwert erreichen (Prognose) an: Wählen Sie den Laufwerkswert, einen Schwellwert und Innerhalb von (Tagen). WatchZit legt eine Gerade durch die letzte Woche des Werts und öffnet ein Problem, wenn diese Gerade den Schwellwert innerhalb der eingestellten Tage erreicht. Das Problem nennt den aktuellen Wert, wie schnell er sich pro Tag ändert und das Datum, an dem er die Schwelle erreicht.

Probleme gehen an die eingerichteten Benachrichtigungskanäle — E-Mail, Slack, Microsoft Teams, Discord, Telegram, ntfy, PagerDuty, SMS oder Webhooks —, und Abhängigkeiten und Wartungsfenster wirken für diese Geräte wie für alle anderen.

Wann der Agent die bessere Wahl ist

Die Prüfungen ohne Agent decken das Wichtigste ab. Der WatchZit-Agent sieht deutlich mehr; installieren Sie ihn also überall, wo Sie dürfen:

Ohne Agent (SSH / WinRM)WatchZit-Agent
CPU, Speicher, Swap / Auslagerungsdatei, LaufzeitJa (Linux auch Load)Ja
LaufwerkeDas vollste LaufwerkJedes Laufwerk
Schnittstellen, Dienste, überwachte Prozesse—Ja
Hyper-V-Maschinen, Docker-Container—Ja
Windows-Ereignisprotokolle, systemd-Journal—Fehler gehen nach Protokolle
VerbindungWatchZit verbindet sich zur Maschine (SSH oder WinRM)Eine ausgehende Verbindung vom Agenten zu Port 8444
Auf der MaschineNichts installiert; ein Benutzer mit AnmelderechtMSI für Windows, deb und rpm für Linux; aktualisiert sich selbst aus der Konsole

Eine gute Faustregel: der Agent auf den eigenen Servern, die Prüfungen ohne Agent auf Maschinen, die Sie nicht verändern dürfen oder können.

Ebenfalls neu in 1.4: Netzwerkpfad und gelernte Trigger

Netzwerkpfad (Traceroute) ist eine Prüfung, die alle fünf Minuten den Weg zu einem Gerät verfolgt, wie MTR: für jeden Router auf dem Weg seine Adresse, seinen Verlust und die beste, mittlere und schlechteste Zeit (standardmäßig 3 Proben pro Hop, bis zu 30 Hops). Jeder Lauf wird 30 Tage aufbewahrt; die Geräteseite zeigt den letzten Pfad, jeden Hop über die letzten 24 Stunden und die letzten zehn Routenänderungen. Der Trigger Loss on the network path (über 20 % für 10 Minuten) kommt mit. Setzen Sie sie auf die Leitung zu einer Zweigstelle oder einem Provider, um zu sehen, wo Verlust oder Verzögerung beginnen; von einem Remote-Kollektor aus verfolgt sie den Weg von dessen Standort.

Wert ungewöhnlich für die Uhrzeit (gelernt) ist ein Trigger ohne Schwellwert. Er lernt aus den letzten vier Wochen, was für einen Wert zu jeder Stunde der Woche üblich ist, und öffnet ein Problem, wenn der Wert weit davon abweicht — höher, niedriger oder beides. Die Empfindlichkeit ist Hoch (mehr Probleme), Mittel oder Niedrig (nur große Änderungen). Er beginnt nach einer Woche Verlauf zu vergleichen. Er funktioniert auch mit den Werten der Prüfungen ohne Agent, etwa bei einer CPU-Last, die am Montagmorgen normal ist, aber nicht in der Nacht auf Montag.

Grenzen

  • Gemeldet wird nur ein Laufwerk: das vollste. Schnittstellen, Dienste, Prozesse und Protokolle brauchen den Agenten.
  • SSH-Schlüssel mit Passphrase werden nicht unterstützt; verwenden Sie einen Schlüssel ohne Passphrase oder ein Passwort.
  • Die Linux-Prüfung liest /proc und ist daher für Linux gedacht, nicht für andere Unix-Systeme.
  • WinRM über HTTPS braucht einen Listener, den Sie auf dem Windows-Server einrichten; der WinRM-Benutzer muss Administrator oder in Remote Management Users mit WMI-Rechten sein.
  • Ein Lauf dauert einige Sekunden; sehr kurze Intervalle sind nicht sinnvoll. Über einen Remote-Kollektor muss der Hostschlüssel von Hand eingetragen werden.

Nächste Schritte

  • Zeichnen Sie die Server auf einer Netzwerkkarte neben Routern und Switches — siehe die Anleitung Eine moderne Alternative zu MikroTik The Dude.
  • Installieren Sie den Agenten auf den Servern, wo Sie dürfen, und behalten Sie die Prüfungen ohne Agent für den Rest.
  • Legen Sie einen Prognose-Trigger für die wichtigsten Laufwerke an.

Alles, was WatchZit kann, steht auf der Funktionsseite; herunterladen können Sie es auf der Download-Seite, die vollständige Referenz ist die Dokumentation. Fragen sind in den GitHub Discussions willkommen. Unternehmen erhalten kommerziellen Support von MaxZit (nur auf Englisch).