Введение в Ceph и Архитектурный обзор

• Вице-президент сообщества Ink Tank, главный спонсор проекта Ceph.  

• Работа заключается в обеспечении успеха компании на основе технологии Ceph.  

• Обсуждение облака и его основных компонентов: вычислительная мощность, сеть и хранилище.  

• Переход от ручного хранения к цифровым носителям.  

• Парадигма "человек-компьютер-лента" и роль Ceph в этом стеке.  

• Увеличение объема данных и необходимость масштабирования.  

• Проблемы с расширением масштабов и необходимость параллелизации.  

• Устройства хранения данных как аппаратное обеспечение.  

• Проприетарное оборудование и программное обеспечение, поддержка и техобслуживание.  

• Необходимость изменений в модели хранения данных.  

• Поддержка стандартного оборудования и бесплатного программного обеспечения с открытым исходным кодом.  

• Экологичная модель хранения данных и роль Ceph.  

• Открытый исходный код как способ распространения технологий.  

• Ориентация на сообщество для улучшения качества продукта.  

• Масштабируемость и отсутствие единой точки отказа.  

• Программное обеспечение как основа системы.  

• Самоуправляемость и решение проблем.  

• График коммитов и развитие Ceph.  

• Кластер хранения данных и его компоненты.  

• Объектный шлюз, блочное устройство и файловая система Ceph.  

• Технические детали и интерфейсы.  

• RAD как основа Ceph.  

• Файловые системы и демоны хранения объектов OSDs.  

• Взаимодействие с кластером хранения как с логической единицей.  

• Экранные меню передают сохраненные объекты клиентам и взаимодействуют для репликации и восстановления.  

• Мониторы поддерживают состояние членства в кластере и голосуют за включение и выключение хостов.  

• Мониторы не передают данные клиентам, а только следят за состоянием кластера.  

• Rados - гибкое и удобное хранилище объектов.  

• Lidos предоставляет доступ к Rados для приложений через собственный протокол.  

• Lidos позволяет приложениям общаться с кластером хранения напрямую.  

• Rados Gateway выступает посредником между приложениями и Rados.  

• Использует протокол сокета на южной стороне и REST на северной стороне.  

• Поддерживает сегменты и бухгалтерский учет, интегрируется с Keystone.  

• RBD - интерфейс для хранения блоков, распределяет тома по всему кластеру.  

• Поддерживает оперативную миграцию виртуальных машин и распределяет нагрузку между гипервизорами.  

• Интегрирован с облачными стеками и поддерживает моментальные снимки и клонирование.  

• CFS - распределенная файловая система, использует сервер метаданных для управления семантикой POSIX.  

• Сервер метаданных хранит метаданные внутри Rados для масштабируемости.  

• Необходим только при использовании общей файловой системы.  

• CEF использует метаданные для размещения данных, что позволяет избежать дополнительных шагов при подключении.  

• Метафора "сколько времени тебе потребовалось, чтобы найти ключи сегодня утром" иллюстрирует, как CEF управляет данными.  

• CEF позволяет приложениям напрямую подключаться к экранным меню для передачи данных.  

• Разделение кластера на части, как при организации книг на полке.  

• Пример с ключами: ключи хранятся в одном месте, но не работают для бесконечно большого и изменяющегося кластера.  

• Алгоритм "влюбленность" для размещения данных в кластере.  

• Хэширование имени объекта и разделение на группы размещения.  

• Алгоритм вычисляет местоположение данных на основе состояния кластера и правил сжатия.  

• Псевдослучайный алгоритм для статистически равномерного распределения данных.  

• Быстрое и повторяемое вычисление, детерминированное и стабильное.  

• Минимальные перемещения данных при восстановлении кластера.  

• Пример с объектом "foo" и группой размещения "23".  

• Алгоритм вычисляет целевые экранные меню на клиенте.  

• Перебалансировка узлов при потере узла.  

• Многослойное блочное устройство для эффективного запуска виртуальных машин.  

• Копирование образа диска без дополнительного места до начала записи данных.  

• Возможность запуска тысяч виртуальных машин без увеличения занимаемого пространства.  

• Динамическое разбиение дерева поиска для масштабирования метаданных.  

• Передача нагрузки между серверами метаданных при увеличении их числа.  

• Решение проблемы масштабирования метаданных в SETH.  

• Легко запоминающиеся URL для скачивания и развертывания SETH.  

• Руководство по быстрому запуску тестового кластера.  

• Краткое руководство по началу работы с Ceph.  

• Установка Ceph на Ubuntu.  

• Развертывание Ceph на AWS с помощью Juju.  

• Публикация блога Патрика о настройке Ceph на AWS.  

• Документы на Ceph.com.  

• Участие в проекте с открытым исходным кодом.  

• Список рассылки и irc-канал для вопросов и помощи.  

• Система отслеживания ошибок и возможность написания документов.  

• Новый релиз Ceph Cuttlefish.  

• Новый инструмент подготовки к развертыванию.  

• Новые кулинарные книги Chef.  

• Интеграция с OpenStack и управление аутентификацией.  

• Поддержка сжатия и интеграции с OpenStack.  

• Вопросы о поддержке общих томов и моментальных снимков.  

• Вопросы о файловой системе и модулях ядра.  

• Возможность раздвоения мозга при наличии нескольких серверов метаданных.  

• Вопросы о контроле над корнем дерева.  

• Презентация будет доступна в Slideshare.  

• Видео с презентацией доступно в Интернете.