Linux by Rebrain: Haproxy + nginx

• Илья, со-основатель платформы Rebrain, приветствует зрителей.  

• Платформа занимается повышением квалификации инженеров через кейсы.  

• Проводятся онлайн практикумы по DevOps, сетям, Linux, безопасности и Go.  

• Все ивенты бесплатные, и можно участвовать в прямом эфире через сообщество в Telegram.  

• Андрей Буранов, специалист по юни-системам и преподаватель.  

• Тема лекции: веб-сервер с балансировкой нагрузки, связка Nginx и HAProxy.  

• Лекция предназначена для новичков, чтобы объяснить основы веб-серверов и балансировки нагрузки.  

• Основная задача - упражнение с командной строкой Linux.  

• Лекции помогают новичкам понять принципы работы Linux.  

• Продвинутые пользователи могут самостоятельно изучать темы.  

• Установка веб-сервера Nginx и прокси-сервера HAProxy.  

• Построение отказоустойчивого кластера на основе предыдущего занятия.  

• Запись лекции доступна в личном кабинете.  

• Вопросы можно задавать в чате, но не все можно ответить онлайн.  

• Вопросы новичков в приоритете, но не все смогут получить ответы.  

• Продвинутые пользователи могут помогать отвечать на вопросы в чате.  

• Nginx не поддерживает балансировку на основе привязки к конкретному сервису.  

• Вопросы можно задавать в чате, и лектор ответит на них.  

• Обсуждение отказоустойчивых решений и взаимодействия HAProxy и Nginx.  

• Обсуждение узкого предмета: HAProxy и Nginx.  

• Планы на лекцию: создание отказоустойчивого кластера.  

• Вопросы организационного характера.  

• Веб-сервер предоставляет документы по протоколу HTTP.  

• Проблемы возникают при увеличении нагрузки и добавлении дополнительных сервисов.  

• Пример с генерацией страниц на основе индексной программы.  

• Веб-сервер начинает использовать базы данных и логи.  

• Система становится сложной и требует отказоустойчивой архитектуры.  

• Популярность сайта приводит к увеличению нагрузки и необходимости масштабирования.  

• DNS не обрабатывает сбои серверов, что приводит к ошибкам.  

• Решение с DNS требует доступности IP-адресов.  

• Необходимость создания отказоустойчивой системы.  

• Nginx как веб-сервер и обратный прокси.  

• Возможность работы Nginx в кластере для балансировки нагрузки.  

• Принципы распределения нагрузки: Round Robin и другие методы.  

• Распределение нагрузки между серверами.  

• Принцип Round Robin и его недостатки.  

• Использование весов для более точного распределения.  

• Лист коннекшн для длинных сессий и работы с базами данных.  

• HAProxy как более гибкий балансировщик.  

• Платная версия Nginx предлагает распределение нагрузки по скорости ответа сервера.  

• Использование HAProxy для балансировки нагрузки между веб-серверами.  

• Варианты балансировки: round robin, static rr, list connection.  

• Front-end и back-end: внешний мир и внутренняя система.  

• Round robin ограничен 4096 серверами, но может назначать веса.  

• List connection распределяет нагрузку на основе количества активных соединений.  

• Сорс балансировка на основе IP-адреса.  

• Настройка устойчивой к сбоям связки с двумя HAProxy и виртуальным IP-адресом.  

• Вопросы и пожелания от участников.  

• Обсуждение репликации данных на бэк-серверах.  

• Введение в тему общего хранилища для веб-серверов.  

• Описание платформы для IT-специалистов.  

• Программа Linux практикум: базовый и продвинутый уровни.  

• Преимущества и особенности программы.  

• Описание тестового стенда с тремя серверами.  

• Установка веб-серверов и HAProxy на хостах.  

• Настройка и тестирование веб-серверов.  

• Установлен и работает HAProxy.  

• На хост 01 и 02 появился порт 80, отвечающий за веб-сервер Nginx.  

• Nginx работает на обоих хостах, выдавая стартовые страницы.  

• HAProxy по умолчанию работает с дефолтными настройками.  

• Конфигурируется секция frontend для работы по TCP.  

• Описывается секция backend с балансировкой по принципу round robin.  

• Исправлен конфигурационный файл HAProxy.  

• HAProxy работает, балансируя запросы между хостами.  

• Проверка работы HAProxy при остановке Nginx.  

• Настройка кластера с балансировкой нагрузки.  

• Изменение портов для HAProxy и Nginx.  

• Подготовка к отказоустойчивому кластеру с HAProxy.  

• Настройка прокси на хост ноль два.  

• Хост ноль три используется для тестов.  

• Настройка отказоустойчивого кластера с использованием демона кипылаф.  

• Проверка статуса прокси на хост ноль один и ноль два.  

• Применение конфигурации из хост ноль три.  

• Настройка единого образа для всех хостов.  

• Важность общего хранилища конфигураций для кластера.  

• Тиражирование конфигурации на два сервера.  

• Описание сервиса кипаф и его работы с виртуальными IP-адресами.  

• Настройка кипаф для работы с хапрокси.  

• Использование команды "пит оф хапрокси" для проверки работоспособности.  

• Настройка кипаф для проверки состояния хапрокси.  

• Описание работы кипаф в режиме актив-пассив.  

• Пассивный сервер становится активным при проблемах с активным сервером.  

• Изменение конфигурации кипаф для работы с хапрокси.  

• Проверка работоспособности хапрокси с помощью команды "пит оф хапрокси".  

• Проблемы с проверкой работоспособности хапрокси.  

• Импровизация и настройка скрипта для проверки.  

• Проверка работы кипаф и хапрокси после настройки.  

• Примитивная проверка работоспособности хапрокси.  

• Обман системы для работы с несколькими результатами.  

• Вставка скрипта проверки в конфигурационный файл типа лаф.  

• Обещание ответить на вопросы в конце.  

• Проверка статуса работы системы.  

• IP-адрес доступен на хост ноль один, но не на хост ноль два.  

• Мастер определяется по последнему активному серверу.  

• Остановка хапрокси на хост ноль один.  

• Проверка работы системы и переключение ролей.  

• Хост ноль один становится мастером, а хост ноль два берет на себя роль клиента.  

• Реализация реальной схемы работы.  

• Простота настройки балансировки нагрузки с помощью хапрокси.  

• Настройка отказоустойчивого сервера с использованием кипф.  

• Высокодоступный сервер с балансировкой нагрузки за час.  

• Хапрокси прост в настройке и понимании.  

• Поддержка три.квик и других протоколов.  

• Настройка в разных дата-центрах требует автономной системы и пула IP-адресов.  

• Настройка SSL на Хапрокси не сложна, есть готовые конфиги.  

• Возможность запуска нескольких сервисов на разных портах.  

• Фильтрация на уровне сети или приложений.  

• Виртуальные IP можно назначить через роутер.  

• Проверка состояния Хапрокси через скрипт.  

• Возможность балансировки на разные протоколы.  

• Защита от сплит-брейна между двумя типами.  

• Балансировка на бэкенде или Хапрокси зависит от инфраструктуры.  

• Возможность работы с мультикастом в одном домене.  

• Настройка работы на трех и более машинах.  

• Проверка состояния сервисов через примитивный скрипт.  

• Балансировка трафика и перенаправление запросов.  

• Назначение виртуальных IP с помощью демона.  

• Ограничения на количество мультикаст адресов.  

• Важность знания операционных систем для джуниоров.  

• Возможность тонких фильтров в Хапрокси.  

• Выбор между CentOS и Ubuntu в зависимости от задач.  

• Важность глубины знаний на собеседованиях.  

• Занятие завершено, благодарность за вопросы.  

• Конфигурации будут переданы организаторам.  

• Напоминание о расчете на новичков и прощание.