Отказоустойчивый кластер MongoDB // Демо-занятие курса «NoSQL»

• Евгений Аристович представляет курс "Отказ устойчивый шардированный кластер монго" и объясняет, что задержка с YouTube составляет 15-20 секунд.  

• Репликация нужна для обеспечения отказоустойчивости и доступности данных.  

• Шардирование позволяет распределить данные по разным нодам и увеличить производительность.  

• В курсе будут рассмотрены разные варианты репликации и их особенности.  

• Арбитр - это нода, которая участвует в голосовании, но не содержит данных.  

• Рекомендуется не запускать арбитр на той же машине, что и реплика.  

• В курсе будет рассмотрено, как развернуть и настроить отказ устойчивый шардированный кластер монго.  

• Видео обсуждает классический репликассет из трех нот, который настраивается в двух вариантах: на отдельной выемке или на одной выемке с тремя сервисами.  

• Шардированный кластер используется для повышения надежности и масштабирования.  

• Репликассет позволяет читать данные с ближайшей ноды и распределять нагрузку между нодами.  

• Репликация данных происходит по протоколу репликации, который определяет, сколько нод должно ответить для подтверждения изменений.  

• Раф- протокол используется для определения лидера кластера и изменения тайм-лайна.  

• Для обеспечения устойчивости кластера рекомендуется использовать нечетное количество нот и нечетное количество хостов.  

• При масштабировании кластера можно отключить подтверждение записи и журналирование, что может привести к небольшой потере данных.  

• Для решения проблемы масштабирования рекомендуется использовать шардированный кластер и правильно настраивать систему.  

• В видео обсуждается проблема с использованием MongoDB и ее решение с помощью шардирования.  

• Шардирование позволяет разделить коллекцию на несколько частей, называемых шардами, и распределить данные по разным нодам.  

• Шардирование усложняет код приложения, так как запросы могут уходить на разные шарды.  

• Операция ка может поломаться при миграции чанков между нодами.  

• Проблемы возникают при низкой селективности и неравномерном распределении данных.  

• В классической схеме шардирования, запросы отправляются в монгос, который знает, где находятся шарды и распределяет данные.  

• Запросы могут уходить на один или несколько шардов, в зависимости от ключа шардирования.  

• Синхронная репликация обеспечивает консистентность данных, но может быть ограничена по времени.  

• Прайм ришат позволяет выбрать, на какой шарде будет праймериз, что позволяет оптимизировать использование ресурсов.  

• Балансинг чанков происходит автоматически, когда размер чанка достигает определенного предела.  

• Чанки делятся на несколько частей, чтобы избежать дисбаланса данных.  

• Демонстрация создания шардированного кластера с использованием обжигов и арбитра.  

• Создание трех каталогов для хранения данных и запуск трех демонов монго в режиме конфиг-сервера.  

• Создание двух шардов и двух репликассет с использованием арбитра.  

• Запуск двух монгосов для обеспечения отказоустойчивости.  

• Попытка добавить шарды в кластер с использованием арбитра, но возникает ошибка.  

• Решение проблемы путем изменения дефолтного райт концерта на одной ноде.  

• Проверка статуса кластера и доступности шардов.  

• В видео рассказывается о шардировании и балансировке данных в базе данных.  

• Шардирование позволяет распределить данные по нескольким серверам, что повышает производительность и отказоустойчивость.  

• Можно автоматизировать процесс шардирования, используя терраформ, анси был роль и другие инструменты.  

• Важно учитывать объем данных и время минимальной загрузки для оптимизации процесса.  

• В видео рассматриваются примеры шардирования на базе данных банк, кассандра, клик, ластик и другие.  

• Шардирование может быть использовано для различных типов данных и запросов.  

• В конце видео автор предлагает бонус в виде скидки на курс и просит задавать вопросы.  

• Дмитрий, Михаил и Андрей обсуждают, что в последнее время компании предпочитают использовать закрытые сегменты публичных облаков вместо использования собственных мощных железок.  

• Они также отмечают, что использование терраформ-мыса позволяет контролировать все процессы и управлять ими.  

• Дмитрий анонсирует курс по монго, который стартует через два месяца, и курс по монго в кубике, который будет проходить через две недели.  

• Дмитрий благодарит всех за участие и приглашает задавать вопросы по организации обучения и помощи в случае необходимости.  

• Он также выражает радость от встречи с коллегами и желает всем хорошего вечера.