Grafana – установка, как настроить алерты, как интегрировать Prometheus и ClickHouse – VyacheArt

• Grafana - система визуализации метрик приложений.  

• Поддерживает графики, таблицы, гистограммы и геокарты.  

• Может работать с данными из Prometheus, ClickHouse, Mulesoft, InfluxDB и ElasticSearch.  

• Имеет бесплатное облачное решение и возможность настройки алертов.  

• Установка через Docker Compose.  

• Подключение Prometheus через Docker Compose.  

• Вход в Grafana через браузер и смена пароля по умолчанию.  

• Добавление Prometheus в Grafana через Docker Compose.  

• Настройка источника данных Prometheus.  

• Тестирование подключения Prometheus.  

• Создание нового дашборда для метрик.  

• Вывод метрик через Grafana.  

• Настройка единиц измерения и формата данных.  

• Создание новой панели для метрик.  

• Настройка длительности обработки запросов.  

• Вывод данных в удобном формате.  

• Создание панели для рейда.  

• Настройка типа панели и вывод данных.  

• Запуск второго ротатора и настройка Prometheus.  

• Настройка переменных в Grafana.  

• Использование переменных для фильтрации данных.  

• Применение переменных в запросах.  

• Использование аннотаций для отображения изменений.  

• Пример с запуском бомбардира.  

• Сохранение и отображение аннотаций.  

• Установка плагина для подключения ClickHouse.  

• Настройка источника данных ClickHouse.  

• Создание запросов и вывод данных.  

• Создание бота для отправки алертов.  

• Настройка канала и получение ID канала.  

• Интеграция с Grafana и настройка правил алертов.  

• Создаем папку и устанавливаем быструю проверку каждые десять секунд.  

• Алерты имеют три состояния: "ок", "плохо" и "пиндинг".  

• Указываем время состояния "пиндинг" для сбора данных.  

• Настраиваем политику уведомлений, используя дефолтный канал связи Telegram.  

• Останавливаем ротатор и ждем фиксации падения сервиса Prometheus.  

• Алерты в состоянии "пиндинг" помогают избежать ложных уведомлений.  

• Если система не восстанавливается за полминуты, алерт отправляется через все каналы связи.  

• После полминуты графана переводит состояние в "лерти".  

• Переключаемся в Telegram-канал и видим алерт о падении инстанса.  

• Запускаем инстанс снова, и графана сообщает о восстановлении.  

• Можно мониторить не только системные показатели, но и бизнес-метрики.  

• Превращаем бизнес-показатели в панели в Grafana для удобного мониторинга.  

• Разные каналы алертов позволяют направлять уведомления в разные чаты.  

• Благодарность первому платному подписчику на Boosty.  

• Анонс заключительного экрана со спонсорами для поддержки канала.  

• Призыв к подписке или разовой поддержке для развития канала.