Мониторинг парка серверов

Что мы видим

Каждый сервер — изнутри

Процесс сервера
- память
- процессор
- открытые файлы и сокеты
- время без перезапуска
Живость ядра
- обороты обслуживающей петли
- когда петля крутилась последний раз
База данных
- живые объекты
- память под данные
- записи в индексах
Сохранность данных
- сохранение снимка базы
- пауза записи на снимок
- сброс журнала на диск
Резервные копии
- последняя удачная копия
- сколько длилась
- пропущенные копии
Сценарии
- вызовы конфигурации
- слишком долгие вызовы
- самые тяжёлые функции
Потоки и очереди
- задачи в очереди
- потоки в ожидании базы
- таймеры и обработчики событий
Плагины и подписки
- загружено плагинов
- живые подписки клиентов
Хабы умного дома
- хабы на связи
- отказы во входе
- раздача прошивок
Мобильные приложения
- приложения на связи
- ошибки протокола
- письма с кодом входа
ZigBee
- команды на хаб
- потерянные кадры
- контроллеры на связи
Журналы
- строки по важности
- потерянные строки

Масштаб

Метрик много — экран один

190+

метрик у одного хаба умного дома

137семейств в каталоге: у каждого название, единица, порог и пояснение «что это значит»

Как это помогает

Не графики, а ответы

Причина — словами

Дежурный видит, что случилось и куда смотреть, без чтения имён метрик.

Не сохраняются данные. Проверьте хранилище.
Зависший сервер не притворится живым

Ядро может встать, а цифры — выглядеть свежими. Поэтому отдельно видно, крутится ли его обслуживающая петля.

петля крутится · последний оборот только что
Пороги — в одном каталоге

Новое правило добавляется в каталог, а не в код экрана: подписи, единицы и пороги берутся оттуда же.

title: Задач в очереди unit: count watch: монотонный рост — сервер не успевает

Экраны

Страница одного сервера

Страница сервера: предупреждение «Не сохраняются данные», карточки процессора, памяти, очереди задач и критических записей, график загрузки процессора за сутки — **Причина сверху, цифры под ней.** Процессор, память, очередь задач, критические записи — и график за выбранный период.

Системы здания: СКУД, домофония, АСКУЭ, лифтовые станции и кабины, зарядные станции, переговорная связь, зоны эвакуации — сколько оборудования на связи — **Системы здания.** От доступа в дом до показаний счётчиков: сколько оборудования на связи и где нужен взгляд.

Снимки на демонстрационных данных · Go · TypeScript · Preact · Prometheus

Дальше

Как устроен серверСвоя база данных, свой язык сценариев, свои плагины

Обсудить задачу Все работы

Весь парк серверов — на одном экране

Каждый сервер — изнутри

Процесс сервера

Живость ядра

База данных

Сохранность данных

Резервные копии

Сценарии

Потоки и очереди

Плагины и подписки

Хабы умного дома

Мобильные приложения

ZigBee

Журналы

Метрик много — экран один

Не графики, а ответы

Причина — словами

Зависший сервер не притворится живым

Пороги — в одном каталоге

Страница одного сервера