WatchZit

Monitorování serverů Linux a Windows bez agenta, přes SSH a WinRM

Na některé stroje agent nainstalovat nejde: appliance, kterou nesmíte měnit, server zákazníka, systém, kde každý nainstalovaný balíček vyžaduje žádost o změnu. WatchZit 1.4 čte takové stroje přes to, co už mají — SSH v Linuxu, WinRM ve Windows — a hlídá je stejnými spouštěči jako agenta. Tento návod ukazuje, co se měří, co cílový stroj potřebuje a jak kontrolu nastavit.

Co tento návod pokrývá

WatchZit je bezplatný systém pro monitorování sítí a serverů s otevřeným kódem (AGPLv3). Vedle kontrol ping, SNMP, webu a databází má malého agenta pro Windows a Linux. Od verze 1.4 existují dva typy kontrol, které na stroji nic nepotřebují: Linux přes SSH (bez agenta) a Windows přes WinRM (bez agenta).

Co se měří

Obě kontroly čtou stejné hodnoty ze stroje, na kterém není nic nainstalováno:

  • zatížení CPU (měřené po dobu jedné sekundy při každém spuštění),
  • použitou paměť,
  • swap v Linuxu nebo stránkovací soubor ve Windows,
  • nejplnější disk,
  • uptime,
  • a v Linuxu také load.

Hodnoty mají stejné názvy jako hodnoty agenta. Proto vestavěné spouštěče pro CPU, paměť a disky i předpovědi fungují na těchto kontrolách bez dalšího nastavení.

Příprava serveru Linux (SSH)

WatchZit se přihlásí přes SSH a spustí jeden pevný příkaz, který jen čte /proc, df a uname. Na server se nic nezapisuje.

  • Uživatel: stačí jakýkoli uživatel, který se smí přihlásit přes SSH — bez rootu, bez sudo. Samostatný uživatel, například monitor, ho oddělí od účtů lidí.
  • Heslo nebo soukromý klíč: jedno z toho. Klíč může být ve formátu OpenSSH nebo PEM a nesmí mít heslo klíče. WatchZit ukládá heslo nebo klíč šifrovaně a už je nikdy nezobrazí.
  • Port: 22, pokud nezadáte jiný. Server WatchZit (nebo vzdálený kolektor, který kontrolu provádí) na něj musí dosáhnout.

Klíč hostitele: důvěra při prvním použití

Při prvním připojení kontrola přijme klíč hostitele serveru a uloží ho. Při každém dalším spuštění se klíč ověří. Když se změní, kontrola přejde do stavu nedostupná a uvede nový klíč — vyměněný server nebo zachycené spojení tak nezůstanou bez povšimnutí. Pokud byla změna očekávaná, například po přeinstalaci stroje, otevřete kontrolu, zaškrtněte Zapomenout uložený klíč hostitele a přijmout další a uložte.

Pokud se nechcete spoléhat na první připojení, zadejte otisk sami do pole Klíč hostitele. Na serveru ho ukáže tento příkaz:

ssh-keygen -lf /etc/ssh/ssh_host_ed25519_key.pub

Pole přijímá otisk SHA256 ve tvaru SHA256:…; prázdné znamená, že se přijme první klíč.

Příprava serveru Windows (WinRM)

Ve Windows čte WatchZit WMI přes WinRM. Windows Server má WinRM zapnutý; v jiných verzích Windows ho zapněte příkazem:

winrm quickconfig
  • HTTP, port 5985: WatchZit se přihlásí pomocí NTLMv2 a každou zprávu šifruje klíčem přihlášení, jak Windows vyžaduje. Nic nejde jako čitelný text, ani bez certifikátu.
  • HTTPS, port 5986: vyžaduje na serveru HTTPS listener WinRM. TLS chrání zprávy a přihlášení je svázáno s certifikátem (channel binding). Pokud listener používá certifikát podepsaný sebou, zaškrtněte Přijímat nedůvěryhodné certifikáty (podepsané sebou).
  • Uživatel: ve tvaru name, DOMAIN\name nebo name@domain. Musí to být správce, nebo člen skupiny Remote Management Users s právy WMI na root\cimv2. Druhá možnost je pro účet pro monitorování vhodnější. Heslo se ukládá šifrovaně.

Přidání kontroly v konzoli

  1. Přidejte stroj v Zařízení s názvem a adresou, pokud tam ještě není.
  2. Otevřete stránku zařízení a klikněte na Přidat kontrolu.
  3. V poli Typ vyberte Linux přes SSH (bez agenta) nebo Windows přes WinRM (bez agenta).
  4. Vyplňte Uživatelské jméno a Heslo. Pro Linux můžete místo hesla vložit Soukromý klíč a volitelně Klíč hostitele. Pro Windows zaškrtněte HTTPS (port 5986), pokud používáte HTTPS listener. Port je v obou případech volitelný: prázdné znamená 22, případně 5985 / 5986.
  5. Nastavte Interval (sekundy) a Časový limit (ms). Jedno spuštění trvá několik sekund, dejte mu proto časový limit alespoň 15 sekund (15000); interval minuta nebo delší stačí.
  6. Klikněte na Přidat kontrolu. Po prvním spuštění stránka zařízení ukáže hodnoty a grafy se od té chvíle plní.

Když kontrolu později upravujete, nechte pole hesla prázdné, aby zůstalo uložené heslo.

Vzdálené kolektory: kontrola, která běží přes vzdálený kolektor na pobočce, nemůže klíč hostitele uložit sama. Zadejte klíč do kontroly; do té doby kontrola ukazuje klíč, který kolektor viděl, takže ho můžete porovnat a zkopírovat.

Spouštěče a předpovědi

Protože hodnoty mají názvy agenta, vestavěné spouštěče v Problémy → Spouštěče hlídají tyto kontroly hned, jak běží:

  • Vysoké zatížení CPU a Paměť téměř plná — nad 90 % po dobu 5 minut,
  • Disk téměř plný a Disk plný — nad 90 % a 97 %.

Chcete-li varování dřív, než se disk zaplní, přidejte spouštěč druhu Hodnota dosáhne prahu (předpověď): vyberte hodnotu disku, Práh a Do (dnů). WatchZit proloží přímku posledním týdnem hodnoty a otevře problém, když přímka dosáhne prahu v nastaveném počtu dní. Problém uvede současnou hodnotu, jak rychle se denně mění, a datum, kdy práh dosáhne.

Problémy jdou do nastavených kanálů upozornění — e-mail, Slack, Microsoft Teams, Discord, Telegram, ntfy, PagerDuty, SMS nebo webhooky — a závislosti a okna údržby fungují pro tato zařízení stejně jako pro ostatní.

Kdy je lepší agent

Kontroly bez agenta pokrývají základ. Agent WatchZit vidí mnohem víc, instalujte ho proto všude, kde smíte:

Bez agenta (SSH / WinRM)Agent WatchZit
CPU, paměť, swap / stránkovací soubor, uptimeAno (Linux i load)Ano
DiskyNejplnější diskKaždý disk
Rozhraní, služby, sledované procesy—Ano
Stroje Hyper-V, kontejnery Docker—Ano
Protokoly událostí Windows, journal systemd—Chyby jdou do Logy
SpojeníWatchZit se připojuje ke stroji (SSH nebo WinRM)Jedno odchozí spojení od agenta na port 8444
Na strojiNic nainstalováno; uživatel s právem přihlášeníMSI pro Windows, deb a rpm pro Linux; aktualizuje se sám z konzole

Dobré pravidlo: agent na vlastních serverech, kontroly bez agenta na strojích, které nesmíte nebo nemůžete měnit.

Také nové ve verzi 1.4: síťová cesta a naučené spouštěče

Síťová cesta (traceroute) je kontrola, která každých pět minut sleduje cestu k zařízení, jako MTR: pro každý router na cestě jeho adresu, ztráty a nejlepší, průměrný a nejhorší čas (výchozí 3 sondy na skok, až 30 skoků). Každé spuštění se uchovává 30 dní; stránka zařízení ukazuje poslední cestu, každý skok za posledních 24 hodin a posledních deset změn trasy. Spolu s ní přichází spouštěč Loss on the network path (nad 20 % po dobu 10 minut). Nasaďte ji na linku k pobočce nebo k poskytovateli, abyste viděli, kde začínají ztráty nebo zpoždění; ze vzdáleného kolektoru sleduje cestu z jeho lokality.

Hodnota neobvyklá pro danou dobu (naučená) je spouštěč bez prahu. Z posledních čtyř týdnů se učí, co je pro hodnotu obvyklé v každé hodině týdne, a otevře problém, když se hodnota od toho výrazně liší — výš, níž nebo obojí. Citlivost je Vysoká (více problémů), Střední nebo Nízká (jen velké změny). Porovnávat začne po týdnu historie. Funguje i na hodnotách kontrol bez agenta, například u zatížení CPU, které je normální v pondělí ráno, ale ne v neděli v noci.

Omezení

  • Hlásí se jen jeden disk: nejplnější. Rozhraní, služby, procesy a protokoly vyžadují agenta.
  • Klíče SSH s heslem klíče nejsou podporovány; použijte klíč bez něj nebo heslo.
  • Kontrola Linuxu čte /proc, je tedy určena pro Linux, ne pro jiné systémy Unix.
  • WinRM přes HTTPS vyžaduje listener, který nastavíte na serveru Windows; uživatel WinRM musí být správce nebo člen Remote Management Users s právy WMI.
  • Jedno spuštění trvá několik sekund; velmi krátké intervaly nemají smysl. Přes vzdálený kolektor se klíč hostitele zadává ručně.

Další kroky

  • Nakreslete servery na mapu sítě vedle routerů a switchů — viz návod Moderní alternativa k MikroTik The Dude.
  • Nainstalujte agenta na servery, kde smíte, a kontroly bez agenta nechte pro ostatní.
  • Přidejte spouštěč s předpovědí pro nejdůležitější disky.

Vše, co WatchZit umí, je na stránce funkcí; stáhnete ho na stránce ke stažení, úplným popisem je dokumentace. Dotazy jsou vítány v GitHub Discussions. Firmy mohou získat komerční podporu od MaxZit (pouze v angličtině).