Конфигурация SSL Kafka | Безопасность Zookeeper | Безопасность Kafka | Серия Apache Kafka - Часть 04

• Обсуждение важности безопасности в Apache Kafka, включая шифрование, аутентификацию и авторизацию.  

• Упоминание о необходимости знания концепций SSL, таких как центр сертификации, хранилище ключей и хранилище доверия.  

• Объяснение процесса шифрования и аутентификации в Apache Kafka.  

• Упоминание о двусторонней аутентификации по протоколу SSL или двустороннем механизме SSL и SHAKE.  

• Обсуждение различных типов безопасности в Apache Kafka, включая безопасность zookeeper и безопасность брокера.  

• Описание шагов для реализации SSL-защиты, включая настройку центра сертификации, создание хранилища доверенных данных, хранилища ключей, запроса на подпись сертификата и импорт подписанного сертификата.  

• Демонстрация процесса внедрения SSL-защиты на примере кластера Kafka с тремя узлами.  

• Описывается процесс установки и настройки системы безопасности Zookeeper, включая остановку кластера Kafka и установку Java Cryptography Extension (JCE).  

• Объясняется, как создать каталог для хранения всех файлов, созданных в процессе настройки, и как выполнить команды для настройки системы безопасности.  

• Создается файл хранилища доверия с использованием Java-утилиты keytool, импортируется открытый ключ центра сертификации и создается файл хранилища ключей.  

• Объясняется, что файл хранилища ключей - это идентификатор компьютера, на котором запущен Zookeeper, и как создать ключ с использованием ключевого алгоритма RSA.  

• Создается файл хранилища ключей с расширением SAR, указывающим DNS-имя компьютера, на котором запущен Zookeeper.  

• Создание хранилища ключей и запроса на подписание сертификата с использованием утилиты Java Keytool.  

• Указание имени и пароля для хранилища ключей и запроса на подписание сертификата.  

• Импорт подписанного сертификата и центра сертификации в хранилище ключей с помощью утилиты Keytool.  

• Настройка Zookeeper для работы на защищенном порту 2182 с использованием параметров защищенного клиента порта и точки аутентификации provider.  

• Добавление реализации класса Java для выполнения аутентификации и использования Apache Zookeeper Server для сетевых подключений.  

• Настройка доверия к местоположению хранилища SSL Trust и пароля.  

• Настройка хранилища ключей и пароля для обеспечения безопасности SSL.  

• В видео обсуждается настройка Zookeeper для обеспечения безопасности.  

• Упоминается параметр "need", который используется для проверки необходимости предоставления учетных данных для аутентификации в Zookeeper.  

• Для запуска Zookeeper используется команда "Запуск сервера Zookeeper".  

• Создается файл свойств для настройки оболочки Zookeeper для обеспечения безопасности.  

• Выполняются шаги для создания доверия, хранилища ключей и запроса на подписание сертификата.  

• Импортируются подписанный сертификат и центр сертификации в хранилище ключей.  

• Обсуждаются свойства для настройки клиента Zookeeper для обеспечения безопасности.  

• Упоминается необходимость использования префикса "zookeeper" перед свойствами для обеспечения безопасности.  

• Устанавливаются свойства для шифрования сообщений при общении с Zookeeper.  

• Упоминается необходимость использования SSL и TLS версии 1.2 для шифрования сообщений.  

• Обсуждаются свойства для хранилища доверенных данных и хранилища ключей клиента Zookeeper.  

• Настройка клиента Zookeeper для использования SSL-протокола.  

• Создание хранилища доверенных данных и хранилища ключей для брокера.  

• Создание запроса на подписание сертификата и его подписание с помощью центра сертификации.  

• Импорт подписанного сертификата и центра сертификации в хранилище ключей брокера.  

• Установка свойств для обеспечения безопасности SSL между Zookeeper и брокером.  

• Установка свойства zookeeper.  

• acl для обеспечения доступа только к информации, предоставленной брокером.  

• Запуск брокера с помощью скрипта kafka server start.sh.  

• Брокер запускается без проблем, и файлы журнала создаются в папке "журналы".  

• Свойства log four j указаны в файле свойств под названием log four j.  

• Для хранения логов брокера используется файл свойств log four j.  

• Для обеспечения безопасности Kafka используются те же шаги, что и для Zookeeper.  

• Создаются файлы хранилища доверенных данных и хранилища ключей для брокеров Kafka, производителей и потребителей.  

• Для обеспечения безопасности Kafka используется отдельный центр сертификации.  

• Брокеры Kafka останавливаются, и настройки безопасности SSL добавляются для аутентификации и шифрования.  

• Свойства для обеспечения безопасности SSL между брокером и его клиентами указаны в файле свойств.  

• Создание хранилища доверенных лиц и хранилища ключей для обеспечения безопасности Kafka.  

• Использование одного и того же пароля для обоих хранилищ.  

• Настройка свойств для SSL-безопасности: ssl.  

• Требование SSL-аутентификации и шифрования.  

• Использование протокола TLS 1.2 для шифрования.  

• Создание файлов хранилища доверенных лиц и хранилища ключей для производителей и потребителей.  

• Настройка свойств для производителей и потребителей: bootstrap.servers, security.protocol, ssl.truststore.location, ssl.keystore.location, ssl.key.password.  

• Использование разных паролей для хранилища ключей и ключа для обеспечения безопасности.  

• Запуск приложений-производителей и потребителей с использованием SSL-безопасности.  

• Создание темы SSL и передача параметров producer.  

• Настройка SSL-безопасности для производителей и потребителей.  

• Использование консольного приложения Kafka Console Consumer для проверки работы SSL-безопасности.  

• Настройка SSL-безопасности для брокеров, включая создание хранилища ключей и хранилища доверия.  

• Изменение свойств SSL для брокеров.  

• Запуск брокеров с SSL-безопасностью.  

• Настройка SSL-безопасности для производителей и потребителей.  

• Отправка сообщений с помощью Kafka Console Producer и использование сообщений с помощью Kafka Console Consumer.  

• Завершение настройки SSL-безопасности в Kafka.