Как сделать свою LoRA для Flux? Два способа, которые подойдут для low vram (8GB / 16GB) #нейросети

• Видео посвящено тренировке LORA для FLux.  

• Будут показаны два способа: с использованием отдельной программы и в Confluence.  

• Оба способа подходят для видеокарт с 8 ГБ памяти.  

• LORA — метод адаптации нейросетей для модификации существующих моделей.  

• Позволяет адаптировать модели для выполнения специфических задач без полного переобучения.  

• Добавляет небольшие блоки знаний, улучшая способность модели справляться с новыми стилями и типами изображений.  

• LORA может быть использована для создания изображений в специфических стилях и улучшения качества генерации.  

• Не подходит для кардинальных изменений архитектуры модели и специфических задач, требующих значительных изменений в понимании модели.  

• Для тренировки LORA используются программы Pinocchio и FLux Jim.  

• Установка Pinocchio может занять длительное время из-за установки необходимых пакетов.  

• После установки Pinocchio и FLux Jim, можно приступать к настройке параметров LORA.  

• В Pinocchio и FLux Jim есть три колонки: LORA Info, параметры и терминал.  

• В LORA Info настраиваются параметры LORA, включая выбор памяти и название LORA.  

• Триггерное слово используется для запуска LORA в промте.  

• Repit Image определяет количество повторений каждого изображения в процессе обучения.  

• Эпохи определяют максимальное количество эпох для обучения модели.  

• Train Steps и Sample Image Every N Steps используются для генерации образцов изображений на основе текстовых подсказок.  

• В третьей колонке формируется скрипт, но он не нужен для тренировки LORA.  

• Все настройки заполнены, и можно приступать к тренировке LORA.  

• Все изображения должны быть квадратными, размером 512x512.  

• Изображения загружаются без кириллицы в папку.  

• Можно добавить описание к изображениям, но это не обязательно.  

• Для простых объектов и стилей можно не добавлять описание.  

• Модель может автоматически распознать, что на изображении.  

• Если используете кэпшены, проверьте их правильность.  

• Настройте степ один и два.  

• Нажмите кнопку "трейнинг" для запуска тренировки.  

• Программа будет скачивать модели и библиотеки, что может занять много времени.  

• Если модели уже скачаны, поместите их в папку с программой.  

• Проверьте правильность названий файлов моделей.  

• Тренировка может занять много времени, поэтому запускайте её в свободное время.  

• После тренировки в папке "аутпут" появится файл модели.  

• Тестируйте модель, генерируя изображения с разными весами.  

• Сравнивайте с исходными изображениями для оценки качества.  

• Установите Confy и скачайте все модели и библиотеки.  

• Используйте кастомные ноды для тренировки модели.  

• Скачайте и установите воркфлоу для тренировки.  

• Укажите размер изображений и путь к папке.  

• Выберите модели и параметры для тренировки.  

• Настройте параметры, такие как network dim и network alpha.  

• Укажите количество шагов для тренировки.  

• Оптимальное значение для моделей Flux - от двух до пяти тысяч шагов.  

• Тренировка завершена, модель готова к использованию.  

• Сплит мод позволяет разделить процесс обучения на более мелкие сегменты.  

• Полезно для видеокарт с ограниченной памятью, например, менее 16 ГБ.  

• В примере использовалось 8 ГБ видеопамяти из 16 ГБ.  

• Состоит из четырех одинаковых сегментов.  

• Позволяет сохранять файлы лора через определенное количество шагов.  

• Полезно для обучения нескольких лор с разными настройками.  

• Сохраняет файлы лора каждые 500 шагов обучения.  

• Позволяет тестировать разные настройки и выбирать оптимальную.  

• Графики показывают динамику обучения модели.  

• Закидываем картинки, выбираем модели, указываем гиперпараметры.  

• Тренировка начинается после нажатия кнопки "Пуск".  

• Прогресс бар показывает время тренировки.  

• Тренировка может занять от трех до пяти часов.  

• Проверяем лора в воркфлоу с рисовалкой флюкса.  

• Настраиваем веса от единицы до ноль одного с шагом ноль один.  

• Ссылки и тайм-коды в описании.  

• Подписывайтесь, ставьте лайки, поддерживайте денежкой.  

• Тренируйте собственные стили, не воруйте чужие.