WatchZit

Мониторинг филиалов через удалённый коллектор

Как следить за сетью филиала, площадки клиента за NAT или закрытой VLAN управления из одной консоли WatchZit — не открывая на площадке ни одного порта. Пошаговое руководство: от первого коллектора до карт, оповещений и резервного коллектора.

О чём это руководство

Консоль WatchZit проверяет устройства, до которых может достучаться. Устройства филиала часто недоступны: они за NAT маршрутизатора филиала, VPN их не охватывает или сеть управления закрыта намеренно. Эту задачу решает удалённый коллектор. Это обычный агент WatchZit на одном компьютере площадки, отмеченный в консоли как коллектор. Он получает проверки устройств своей площадки, выполняет их на месте, обнаруживает сеть площадки и отправляет результаты обратно по собственному зашифрованному соединению. Когда связь с консолью пропадает, он продолжает измерять, а второй коллектор может взять работу на себя, если первый выйдет из строя.

Что понадобится

  • Работающая консоль WatchZit (appliance или установочный скрипт; см. страницу загрузки).
  • На каждой площадке один постоянно включённый компьютер: Linux или Windows. Достаточно небольшой ВМ или машины класса Raspberry Pi; агент для Linux есть для amd64 и arm64.
  • С этого компьютера — исходящее соединение на порт агентов 8444 сервера. На площадке ничего открывать не нужно: коллектор подключается наружу, а консоль к нему никогда не подключается.
  • Права администратора в консоли: только администраторы создают коллекторы и выбирают, откуда ведётся мониторинг устройств.

Подготовьте сервер для внешних агентов

У консоли два порта: 8443 для веб-интерфейса и API и 8444 для агентов. Оставьте 8443 для сетей администраторов, а из филиалов сделайте доступным только 8444, например пробросом порта на межсетевом экране головного офиса.

Если филиалы обращаются к серверу по другому имени, чем консоль, укажите его в Настройки → Сеть и доступ как Публичный адрес для агентов, например https://monitor.example.com:8444. Он попадает в каждый код регистрации, поэтому задайте его до создания кодов. На той же странице можно ограничить сети, из которых могут подключаться агенты.

Установите агента на площадке

  1. В разделе Агенты создайте код регистрации: название, сколько дней он действует, сколько компьютеров может им воспользоваться и группу для новых устройств. Код показывается один раз. Он содержит адрес сервера и отпечаток сертификата агентов, так что агент доверяет только вашему серверу.
  2. На компьютере с Windows скачайте MSI со страницы «Агенты» и установите его; он запросит код. Без вопросов: msiexec /i watchzit-agent-x64.msi ENROLLCODE="WZ1-…" /qn. Служба называется WatchZitAgent.
  3. В Linux скопируйте команду со страницы «Агенты»: она скачивает агента с порта агентов, проверяет его SHA-256 и устанавливает с кодом как службу systemd watchzit-agent. Или установите пакет deb или rpm из релиза и выполните sudo watchzit-agent enroll --code "WZ1-…".

Компьютер появится как устройство с процессором, памятью, дисками и интерфейсами. Если он не подключается, проверьте, доступен ли ему порт 8444, и разрешённые сети в Настройки → Сеть и доступ; журнал агента в Windows находится в C:\ProgramData\WatchZit Agent, в Linux — в journalctl -u watchzit-agent.

Сделайте его удалённым коллектором

Откройте страницу устройства нового агента и нажмите Использовать как удалённый коллектор в блоке Агент. На стороне коллектора больше ничего не нужно: у него нет собственного веб-интерфейса и ничего не настраивается локально — всё задаётся в консоли.

Страница Агенты теперь показывает его в разделе Удалённые коллекторы с состоянием и числом устройств, которые он контролирует. Коллектор обновляется как любой другой агент: агент старше сервера при подключении получает версию сервера.

Назначьте устройства площадки

У каждого устройства на его странице есть настройка Мониторинг с: Эта консоль или один из ваших удалённых коллекторов. Для одного устройства выберите там коллектор и нажмите Сохранить.

Для многих устройств сразу отфильтруйте список устройств (например, по группе филиала), отметьте их и воспользуйтесь Изменить выбранные: → Мониторинг с.

Коллектор получает их проверки — ping, TCP, SNMP, веб-страницы и сценарии, сертификаты, DNS, базы данных, MikroTik RouterOS, JSON API — вместе с нужными паролями и настройками SNMP, выполняет их с их интервалами и отправляет результаты в консоль. Графики, триггеры и карты работают точно так же, как для устройств, которые консоль проверяет сама.

Обнаружьте сеть филиала

Добавлять устройства филиала вручную не нужно. В разделе Устройства → Обнаружение добавьте диапазон филиала (например, 192.168.20.0/24; не больше /22) и выберите рядом коллектор. Коллектор сканирует сеть своей площадки: пингует каждый адрес, пробует распространённые порты, опрашивает SNMP с вашими профилями SNMP и ищет DNS-имена. Запустите сканирование сразу, ежедневно или еженедельно; при расписании новые узлы филиала появляются сами.

Отметьте нужные узлы и нажмите Добавить как устройства. Устройства, добавленные из диапазона, который сканировал коллектор, автоматически контролируются этим коллектором. SNMP-обнаружение на странице устройства и чтение сведений, интерфейсов и VLAN тоже идут через коллектор.

Карта для каждой площадки

Отдельная карта для каждого филиала сохраняет ясность. В разделе Карты добавьте карту, нажмите Изменить и разместите на ней устройства филиала кнопкой Добавить устройство. Предлагаемые связи предлагают кабели, которые WatchZit нашёл на устройствах, с портами на обоих концах; Добавить все принимает их, Упорядочить раскладывает карту по кабелям, а Сохранить сохраняет её. Фоном может служить поэтажный план.

Затем создайте одну обзорную карту с вложенной картой для каждого филиала: вложенная карта ведёт на карту филиала и показывает её худшее состояние, так что красный филиал сразу бросается в глаза. Для настенного экрана Настройки → Киоск-экраны показывают карты на весь экран по секретной ссылке.

Чтобы следить за самим каналом, добавьте проверку Сетевой путь (traceroute) на устройство, которое контролирует коллектор: коллектор трассирует со своей площадки, поэтому вы видите каждый маршрутизатор на пути из филиала с потерями и задержкой, а также момент смены маршрута.

Оповещения, когда пропадает канал филиала или коллектор

Когда связь между филиалом и консолью обрывается, коллектор продолжает выполнять проверки. Результаты — до суток, последние 200 000 — ждут на коллекторе и приходят, когда связь восстанавливается, поэтому в графиках нет провалов.

Тем временем консоль не делает вид, что знает больше, чем знает: проверки устройств коллектора показывают Неизвестно, а не «не работает», ведь на площадке всё может быть в порядке. Проверка агента самого коллектора открывает проблему, и именно это сообщение вы получаете: одно оповещение на филиал, а не по одному на каждое устройство. Куда отправляются проблемы, задаётся в Настройки → Уведомления — электронная почта, webhook, Slack, Microsoft Teams, Telegram, ntfy, PagerDuty, SMS и другое.

Внутри филиала шум снижают зависимости. Откройте карту филиала и нажмите Зависимости: по кабелям от маршрутизатора каждому устройству предлагается предыдущее. Нажмите Установить отмеченные зависимости. Когда маршрутизатор или коммутатор филиала выходит из строя, устройства за ним считаются лишь недоступными, а их проблемы записываются, но не отправляются. Триггер Нет новых данных ловит проверки, которые перестали выдавать значения.

Второй коллектор для переключения

Для важной площадки установите агента на второй компьютер там же и тоже сделайте его коллектором. Затем выберите его как Резервный рядом с Мониторинг с на странице устройства, или для многих устройств в списке через Изменить выбранные: → Резервный коллектор.

Пока первый коллектор не в сети, резервный выполняет проверки его устройств. Когда первый возвращается, он снова их забирает. Чтобы полностью вернуть устройства консоли, нажмите Прекратить сбор на странице устройства коллектора.

Что нужно учитывать

  • Результаты, накопленные во время обрыва, не переживают перезапуск коллектора: после перезапуска он снова получает проверки от консоли, а то, что он ещё не отправил, теряется.
  • Буфер хранит до суток, не больше последних 200 000 результатов. Более долгий обрыв оставляет провал.
  • Проверки гипервизоров остаются за консолью; коллектор их не выполняет.
  • Безагентным проверкам Linux по SSH через коллектор нужен ключ хоста, указанный в проверке: коллектор не может его сохранить и поэтому показывает ключ, который увидел.
  • Пока канал не работает, консоль показывает устройства коллектора как неизвестные; их реальное состояние видно только после прихода результатов.
  • Удаление агента на странице устройства делает его ключ неизвестным; чтобы снова использовать этот компьютер, зарегистрируйте его новым кодом.

Что дальше

Вопросы и идеи приветствуются в GitHub Discussions. Компании могут получить коммерческую поддержку от MaxZit (только на английском).