Сборочная линия с нуля. Jenkins, GitLab, SonarQube и EDT за один вечер.

• Приветствие зрителей и проверка связи.  

• Проблемы с началом стрима и извинения за технические неполадки.  

• Объявление о планах на стрим и представление участников.  

• План включает настройку и запуск различных инструментов, таких как Sonar, Gitlab, Jenkins и Docker.  

• Использование готовых рецептов для установки и настройки.  

• Основная цель - развернуть инфраструктуру за два часа.  

• Объяснение, что такое Docker и его особенности.  

• Установка Docker на Ubuntu 20.04 LTS с использованием XRDP.  

• Пошаговая инструкция по установке Docker и настройке системы.  

• Использование виртуальной машины с Linux для демонстрации.  

• Установка необходимых пакетов и инструментов, таких как Mono и Puppet.  

• Подготовка системы для тестирования и запуска различных экосистем.  

• Установка Jenkins и создание базы данных.  

• Обсуждение необходимости установки различных инструментов и их совместимости.  

• Проблемы с лицензией и их решение.  

• Обсуждение использования различных инструментов для обработки данных.  

• Преимущества и недостатки ClickHouse и других инструментов.  

• Проблемы с внешними источниками данных и их решение.  

• Создание конфигурации из трех справочников.  

• Создание хранилища для конфигурации.  

• Использование BSP для быстрого создания хранилища.  

• Запуск Docker в режиме Swarm.  

• Преимущества Swarm для небольших сборок.  

• Простота настройки и защиты Swarm.  

• Создание сертификатов для Docker Swarm.  

• Настройка Docker для работы с сертификатами.  

• Редактирование конфига Docker для защиты.  

• Установка и настройка Proton для управления Docker.  

• Создание сети для контейнеров.  

• Использование Proton для управления Docker в графическом режиме.  

• Создание Gitlab-репозитория для хранения исходников.  

• Использование Docker Compose для запуска нескольких контейнеров.  

• Настройка параметров для безопасности и конфигурации Gitlab.  

• Создание нового каталога и файла Docker Compose.  

• Настройка параметров для PostgreSQL и Redis.  

• Рекомендации по изменению пароля для повышения безопасности.  

• Настройка портов и переменных среды для Gitlab.  

• Рекомендации по шифрованию данных и изменению пароля.  

• Описание параметров и их значений в документации.  

• Скачивание и установка образов для Docker Compose.  

• Преимущества использования проверенного образа.  

• Обсуждение сложностей с конфигурацией и поддержкой.  

• Обсуждение использования Gitlab и других систем.  

• Проблемы с интеграцией и настройкой Gitlab.  

• Рекомендации по переходу на Gitlab для серьезных проектов.  

• Проблемы с запуском Gitlab и их решение.  

• Обсуждение безопасности и необходимости смены порта.  

• Настройка и запуск Gitlab через Docker Compose.  

• Управление контейнерами через Docker Desktop.  

• Проблемы с запуском Gitlab и их решение.  

• Рекомендации по использованию Docker Compose для управления контейнерами.  

• Развертывание Jenkins и других сервисов.  

• Использование репозитория Docker для запуска сервисов.  

• Поддержка и развитие проекта Docker.  

• Обсуждение Docker-файла и зависимостей.  

• Упоминание репозитория на GitHub.  

• Использование скриптов сборки для создания Docker-образов.  

• Создание копии файла с настройками переменных среды.  

• Указание версии платформы и параметров Docker.  

• Проблемы с публичным размещением образов на Docker Hub.  

• Использование шаблона Docker-контейнера для создания репозитория.  

• Настройка порта и параметров репозитория.  

• Публикация и запуск контейнера.  

• Указание IP-адреса и порта для репозитория.  

• Настройка логина и пароля для доступа.  

• Проблемы с качеством связи и настройкой.  

• Выполнение команды для чтения переменных из файла.  

• Сборка и запуск Docker-образов.  

• Настройка качества сборки и использование скриптов.  

• Установка Jenkins из Docker Hub.  

• Использование образа LTS.  

• Настройка портов и сохранение данных.  

• Подключение Jenkins к сети.  

• Ожидание завершения установки.  

• Проверка сети и скорости скачивания.  

• Обсуждение идеи создания официальных зеркал для хап-пакетов.  

• Хранение разрешенных серверов на GitHub и синхронизация с ними.  

• Проблема начального посева всех пакетов и необходимость использования дейли бэкапов.  

• Обсуждение проблем с зеркалами на разных платформах.  

• Необходимость синхронизации обновлений и использование Kafka.  

• Вопросы о первичном посеве пакетов и использовании Kafka для синхронизации.  

• Создание пустого репозитория и настройка файлов.  

• Проблемы с автоматизацией и необходимость ручного управления.  

• Обсуждение сложностей с синхронизацией пользователей и конфигураций.  

• Настройка Gitik и использование плагинов.  

• Плагины как дополнительная логика для синхронизации.  

• Включение и использование различных плагинов для настройки поведения синхронизации.  

• Настройка авторизации и выгрузки данных.  

• Создание хранилища и добавление кода в репозиторий.  

• Проверка работы Git и создание исходников в репозитории.  

• Публикация образа на Docker Hub.  

• Проблемы с безопасностью и необходимость настройки конфига.  

• Поиск и настройка Docker daemon для публикации образа.  

• Обсуждение необходимости вспомнить, как работать с Docker и Jenkins.  

• Важность быстрого гугления для решения проблем.  

• Рекомендация записывать шаги для лучшего понимания.  

• Запуск Jenkins и настройка пароля администратора.  

• Установка необходимых плагинов, таких как Board в Пуст и тайм-ауты.  

• Настройка конфиг провайдера для удобного управления файлами.  

• Сравнение Jenkins и Gitlab в плане визуализации результатов.  

• Jenkins имеет встроенный публикатор для JUnit и использует Groovy для сценариев.  

• Удобство работы с Jenkins по сравнению с Gitlab.  

• Установка Docker Swarm плагина и настройка облачного провайдера.  

• Создание сертификатов и настройка параметров авторизации.  

• Решение проблем с проверкой сертификатов и настройка Docker Compose.  

• Благодарность за донаты и поддержка трансляции.  

• Завершение обсуждения и переход к следующей теме.  

• Попытка запустить Jenkins после исправления сертификатов.  

• Проверка IP-адреса для обращения по IP.  

• Ошибки при настройке сертификатов и их исправление.  

• Проверка сертификатов сервера и ноды.  

• Настройка сертификатов для корректной работы Jenkins.  

• Проблемы с протоколами и сертификатами в TeamCity.  

• Создание виртуальной машины с 22 ГБ памяти и 4 ядрами.  

• Использование ресурсов для агентов Jenkins.  

• Настройка Docker Agent для Jenkins.  

• Использование Docker образа для Jenkins.  

• Настройка домашней директории и запуск Docker Agent.  

• Создание тестовой задачи для Jenkins.  

• Проблемы с запуском Docker Agent.  

• Проверка логов и данных.  

• Успешный запуск Docker Agent.  

• Добавление Docker Agent для Jenkins.  

• Настройка параметров запуска агента.  

• Проблемы с памятью и их решение.  

• Запуск Docker для Jenkins.  

• Использование команды для поднятия образов.  

• Настройка входа в контейнер и запуск Windows сессии.  

• Проблемы с Docker и Jenkins.  

• Использование Windows сессии для расследования проблем.  

• Преимущества Docker для изоляции и управления ресурсами.  

• Поднятие Docker и Jenkins.  

• Проверка запуска контейнеров.  

• Решение проблем с памятью и ресурсами.  

• Обсуждение памяти и многоядерных систем.  

• Упоминание о старом оборудовании и текущем поколении процессоров.  

• Версия 15.20.  

• Установка Jenkins и открытие порта 5900.  

• Подготовка библиотеки для работы с Jenkins.  

• Упоминание репозитория Jenkins и его использования.  

• Библиотека для Jenkins позволяет запустить конвейер сборки одной строкой.  

• Описание процесса создания информационной базы, инициализации и тестирования.  

• Использование команды pipeline для автоматизации процесса.  

• Подключение библиотеки в настройках Jenkins.  

• Указание имени и версии библиотеки.  

• Настройка параметров авторизации для GitHub.  

• Создание файла конфигурации в репозитории.  

• Указание параметров сборки и шагов.  

• Запуск сборки и проверка работы.  

• Создание мультибрач пайплайна в Jenkins.  

• Указание исходников и параметров сборки.  

• Запуск сборки и проверка работы.  

• Проблемы с плагином и ожидание агента.  

• Выполнение шагов сборки и инициализации.  

• Устранение ошибок и написание тестов.  

• Обсуждение проблем с библиотеками и их исправлением.  

• Упоминание о работе Jenkins в Docker контейнере.  

• Проблемы с импортом аннотаций и их влиянием на код.  

• Обсуждение методов исправления библиотек.  

• Упоминание о необходимости форка и исправления кода.  

• Проблемы с подключением библиотек через Git репозитории.  

• Обсуждение работы Jenkins в Docker.  

• Проблемы с коммитами и их влиянием на сборку.  

• Упоминание о шрифтах для терминала и их влиянии на вывод.  

• Настройка SonarQube в Jenkins.  

• Указание параметров для SonarQube в репозитории.  

• Проблемы с логином и паролем для SonarQube.  

• Проблемы с запуском Docker-контейнера для SonarQube.  

• Упоминание о готовых Docker-образах и их использовании.  

• Проблемы с бранч-плагином и его настройкой.  

• Настройка Jenkins для записи сборки.  

• Проблемы с обновлениями и их влиянием на prod-приложение.  

• Упоминание о плагинах и их установке.  

• Проблемы с перезагрузкой и сохранением настроек.  

• Упоминание о выполнении команд на хосте.  

• Проблемы с плагинами и их настройкой.  

• Настройка SonarQube для Jenkins.  

• Проблемы с запуском агента SonarQube.  

• Упоминание о готовых Docker-образах для SonarQube.  

• Завершение настройки SonarQube.  

• Создание проекта с ключом "СССР".  

• Проблемы с доступом и настройкой плагина.  

• Настройка системы Jenkins с использованием IP-адреса и токена.  

• Админ имеет права на анализ всех проектов.  

• В проекте используется небольшой конфигурационный файл Jenkins.  

• В проекте по умолчанию включены шаги инициализации информационной базы и миграции.  

• Включение шагов инициализации и тестирования на основе JSON-файлов.  

• Использование дефолтных значений для Sonar и других инструментов.  

• Запуск анализа кода с использованием Sonar.  

• Обнаружены три дефекта кода.  

• Проблемы с инициализацией базы данных и необходимость исправления.  

• Установка EDT-агента для Jenkins.  

• Использование Docker для сборки EDT-агента.  

• Проблемы с версиями EDT и их влияние на производительность.  

• Обсуждение деградации производительности на пятой версии EDT.  

• Сравнение производительности различных процессоров.  

• Проблемы с апгрейдом оборудования и использованием видеокарт.  

• Обсуждение процессора и его конфигурации.  

• Настройка задач по умолчанию и использование cron.  

• Проблемы с обновлением и фильтрацией коммитов.  

• Клонирование репозитория и добавление дополнительных параметров.  

• Тайм-аут и очистка перед клонированием.  

• Использование данных о коммитах в Jenkins.  

• Хранение пути к хранилищу и логина с паролем.  

• Использование переменных для хранения секретов.  

• Настройка пользователей и ролей.  

• Настройка SSH-ключа для выполнения пуша.  

• Использование агента для выполнения задач.  

• Включение необходимых плагинов и выполнение команд.  

• Использование переменной LOG_CONFIG для управления логированием.  

• Включение дебага для конкретных библиотек.  

• Настройка агента и выполнение задач.  

• Включение EDT валидации и настройка свойств.  

• Удаление файлов на замке и анализ данных.  

• Использование библиотеки Stebi для обработки файлов.  

• Запуск сканирования и анализ изменений.  

• Трансформация исходников в формат EDT.  

• Обработка результатов EDT-контроля и добавление замечаний.  

• Обсуждение проблем с отображением логов в интерфейсе.  

• Запуск шага трансформации формата EDI и клонирование исходников.  

• Проблемы с импортом и использованием библиотеки SLF4J.  

• Обсуждение проблем с зависимостями и импортом плагинов.  

• Проблемы с развертыванием проекта и импортом справочников.  

• Тесты под EDI и их влияние на производительность.  

• Запуск шага EDI контроля и валидации.  

• Проблемы с зависимостями и сборкой проекта.  

• Запуск шага трансформации результатов и использование стека.  

• Обсуждение написания модульных тестов в EDI.  

• Проблемы с установкой моно и использованием стека.  

• Вопросы по работе с SSH-ключами и использованием агента.  

• Обсуждение использования Git LFS для оптимизации сборки.  

• Проблемы с размером сборки и скоростью клонирования репозитория.  

• Настройка Git LFS на клиенте и под Linux.  

• Обсуждение необходимости починки хранилища и создания пустого конфига с настроенными агентами.  

• Упоминание о необходимости стабильной сборки из исходников с замками.  

• Проблемы с конфигурацией поставщика и необходимость использования бинарных файлов.  

• Запуск Visual Studio Code на Windows машине с ключами вnix.  

• Обсуждение возможных решений для запуска Visual Studio Code в режиме от имени пользователя.  

• Упоминание о необходимости использования агента для проброса использования ключей.  

• Процесс сборки Docker образов для агентов и хранилищ.  

• Указание на необходимость установки агента на машине, с которой запускается Visual Studio Code.  

• Обсуждение необходимости использования агента для обхода паролей.  

• Проблемы с отображением ссылок, отправленных не от админов, в чате YouTube.  

• Рекомендация использовать другие платформы для коммуникации.  

• Упоминание о необходимости пересобрать Docker образ из-за ошибки в названии.  

• Обсуждение особенностей использования библиотеки и необходимости конфигурации в JSON-файлах.  

• Упоминание о возможности передачи параметров через командную строку и JSON.  

• Проблемы с использованием сборки Vanessa от первого бита и планы по использованию новой версии.  

• Обсуждение необходимости наличия файла pkg в корне репозитория.  

• Пример использования файла pkg для установки зависимостей.  

• Планы по улучшению механизма выбора зависимостей.  

• Запуск сборки и конвертация результатов ETL.  

• Запуск Sonar Scanner для анализа кода.  

• Проблемы с гибдд отчетами и необходимость их исправления.  

• Описание артефактов сборки, включая базу данных и результаты тестов.  

• Возможность перехода к различным инструментам для анализа кода.  

• Восхищение качеством и функциональностью библиотеки.  

• Подведение итогов и благодарность зрителям.  

• Описание библиотеки как готовой инфраструктуры для конвейера сборки.  

• Планы на новый релиз книги и благодарность за донаты.  

• Планы по добавлению шагов с TDD и дымовыми тестами.  

• Желание добавить сбор покрытия кода через библиотеку Coverage.  

• Завершение видео и пожелания спокойной ночи.