Собираем свою схему в ComfyUI с нуля на базе SD 1.5 | Гайд для новичков

• Comfy AI активно обновляется и поддерживает современные технологии.  

• Видео предназначено для новичков и тех, кто переходит с других программ.  

• Объяснения будут на примере моделей 1.5, так как они подходят для большинства задач.  

• Для работы с Comfy AI нужно скачать модель и VAE.  

• Рекомендуется использовать сайт colab.com для загрузки моделей.  

• На сайте можно выбрать модели по популярности и стилю.  

• После скачивания модели и VAE можно запустить Comfy AI.  

• Если данные отсутствуют, можно восстановить их через кнопку "Ворфлоу".  

• Программа предупреждает о необходимости базовой модели, но её можно скачать с сайта colab.com.  

• Comfy AI использует нодовый интерфейс для генерации изображений.  

• Нода "лотчик пойнт" загружает модель и отвечает за промт.  

• Промт делится на позитивный и негативный, определяя, что должно быть и отсутствовать на изображении.  

• Нода "эм тела" отвечает за размеры изображения.  

• Нода "бачсайс" определяет количество генерируемых изображений.  

• Нода "кейс сэмплер" используется для генерации изображения.  

• Нода "сид" задает стартовое значение для генерации.  

• По умолчанию используется рандомайз, но можно зафиксировать значение для получения повторяющихся изображений.  

• Нода "степс" определяет количество шагов для генерации.  

• Нода "кфг" регулирует, насколько строго программа следует промту.  

• Нода "сэмплер" выбирает математическую модель для генерации.  

• Разные сэмплеры дают разные результаты, и их можно экспериментировать для нахождения подходящего.  

• Шедлер планировщик и динойс остаются на единице.  

• VAI используется для преобразования числового массива в изображение.  

• Разные модели VAI дают разные результаты, улучшая насыщенность цветов.  

• Изображения сохраняются в папке конфи.  

• При отключении ноды сохранения изображения будут храниться временно в папке темп.  

• Рекомендуется оставить ноду для сохранения изображений при каждой генерации.  

• Для более сложных задач, таких как иннинг, нужны кастомные ноты.  

• В интернете можно найти готовые воркфлоу, но лучше собрать их самостоятельно.  

• Начнем с удаления существующих нот и создания нового воркфлоу с нуля.  

• Кастомные ноты можно скачать через менеджер.  

• Менеджер устанавливается по умолчанию при установке конфи айпад злуда.  

• Для доступа к менеджеру нужно открыть настройки конфи и включить топ меню.  

• В менеджере можно найти и установить различные кастомные ноты.  

• Установлены пакеты: импак-пак, контрол нет, эфиш нот, вас нот, конфи кастом скрипт и другие.  

• Ноты можно скачать через менеджер или отсортировать по рейтингу.  

• Создаем загрузчики модели и вай.  

• Используем ноду "лот чек-пойнт" для модели и "лот вай" для вай.  

• Вводим "лот" для поиска ноды.  

• Лора - это мини-модели, дополняющие основную модель.  

• Лора помогают генерировать персонажей и объекты, которых нет в основной модели.  

• Лора можно скачать на сайте и использовать для генерации изображений.  

• Добавляем загрузчик лора с помощью ноды "пауэр лора лодер".  

• Выбираем лора из списка и устанавливаем вес для лора.  

• Соединяем модель и лора для генерации изображений.  

• Соединяем модель, вай и лора для генерации.  

• Используем положительный и отрицательный промт.  

• Добавляем кейс сэмплер для генерации изображений.  

• Подключаем модель и лора к кейс сэмплеру.  

• Подключаем позитивный и негативный промт.  

• Устанавливаем размер изображения и подключаем вай.  

• Используем ноды "сейф имидж" и "превью в имидж" для сохранения и демонстрации изображений.  

• Сохраняем изображение через "сейф имидж".  

• Демонстрируем результаты генерации.  

• Процесс генерации изображения начинается с превью.  

• Можно выбрать метод превью: авто, тест или латан то джи би.  

• Пример использования метода латан то джи би для генерации изображения.  

• Интеграция ноды кохья харес фикс для улучшения качества изображения.  

• Нода кохья харес фикс помогает избежать проблем с разрешением при генерации.  

• Подключение модели через кохья харес фикс и кейс сэмплер.  

• Использование нод инт и ин констант для переключения моделей.  

• Подключение моделей через ноду свич.  

• Переключение между базовой моделью и моделью через кохья харес фикс.  

• Использование ноды селект для переключения входов.  

• Сворачивание нод для компактного интерфейса.  

• Переключение между базовой моделью и моделью через кохья харес фикс.  

• Подключение контрол нет для улучшения генерации.  

• Использование позитивного и негативного промта.  

• Подключение ноды свич для переключения между включением и выключением контрол нет.  

• Загрузка моделей контрол нет через менеджер.  

• Подключение моделей к контрол нет.  

• Использование моделей для генерации изображений.  

• Использование опен поз для генерации персонажей в определенной позе.  

• Использование готовых поз или извлечение позы из готового изображения.  

• Подключение изображения через лот имидж загрузчик.  

• Использование при процессора для извлечения позы из изображения.  

• Подключение при процессора к контрол нет.  

• Альтернативный способ добавления нод через библиотеку узлов.  

• Процессоры связаны с моделями, например, OpenPose требует модель OpenPose.  

• Для определения глубины используется модель Depth, для линий - LineArt.  

• Процессоры автоматически скачиваются при первом запуске.  

• Генерация может затянуться из-за скачивания процессора.  

• Preview Image нода показывает результат работы процессора.  

• Пример использования: передача позы персонажа при генерации нового.  

• Создание переключателя для выбора между готовым изображением и процессором.  

• Использование ноды Switch для выбора между прямым подключением изображения и использованием процессора.  

• OpenPose считывает позу с изображения.  

• LineArt превращает изображение в набросок для генерации.  

• Depth создает карту глубины для объектов.  

• Регулировка силы и стартового значения процессора.  

• Группировка нод для удобства и организации.  

• Переименование и перестановка нод для улучшения читаемости.  

• IP-адаптер позволяет переносить стиль из одного изображения в другое.  

• Подключение через модель и создание переключателя для включения и выключения адаптера.  

• Обсуждается порядок использования моделей при оритизации.  

• IP-адаптер считается более важным, чем KOHIA Hares Fix.  

• Сначала должен сработать IP-адаптер, затем KOHIA Hares Fix.  

• Полностью собираем IP-адаптер.  

• Выбираем модель IP-адаптера из менеджера.  

• Модели делятся на лица, общие и стандартные.  

• Модели имеют общие входы и выходы для удобства.  

• Подключаем загрузчик изображения для указания стиля.  

• Сначала используем базовую модель, затем IP-адаптер.  

• Подключаем включатель для IP-адаптера.  

• Настраиваем размеры и названия для удобства.  

• Проверяем работу модели.  

• Берем позу и стилистику с разных изображений.  

• IP-адаптер переносит общую стилистику и окружение.  

• Настройки веса и типа веса для генерации.  

• Сочетание ControlNet и IP-адаптера позволяет делать интересные вещи.  

• Возможность использования KOHIA Hares Fix для высокого разрешения.  

• Настройка группы для удобства и сохранения.  

• Face Deteiler автоматически определяет и улучшает лица на изображениях.  

• Для работы требуется нода с таким же названием.  

• Есть два варианта подачи изображения: генерация и загрузка.  

• Используем переключатель для выбора между генерацией и загрузкой.  

• Добавляем ноды для генерации и загрузки изображений.  

• Переключаем входы для генерации и загрузки.  

• Подключаем модель и клип к ноде Face Deteiler.  

• Используем ноду для соединения модели и клипа.  

• Добавляем позитивный и негативный промиты.  

• Позитивный промит содержит детализированное лицо.  

• Негативный промит корректирует черты лица.  

• Используем ноду для соединения клипов.  

• Подключаем бибокс детектор для автоматического определения лица.  

• Бибокс детектор выделяет лицо в квадратике.  

• Сэм детектор выделяет лицо точечно.  

• Используем ноду для сохранения результата.  

• Добавляем ноду для сравнения изображений.  

• Подключаем ноду для проверки зоны лица.  

• Устанавливаем размер и количество шагов.  

• Настраиваем значение динойс для изменения лица.  

• Изменяем значение бибокс фактора для размера лица.  

• Сравниваем изображения до и после обработки.  

• Создаем группу для Face Deteiler.  

• Переносим ноды в группу для удобства использования.  

• Обскеллер увеличивает изображение в размерах, сохраняя детали.  

• Работает по принципу деления изображения на секции и их обработки по отдельности.  

• В итоге изображение становится больше, сохраняя качество.  

• Необходимы загрузчик изображения и сам обскеллер.  

• Подключение модели и позитивного/негативного промта.  

• Подключение клипов и вай.  

• Обскеллеры можно скачать в менеджере модулей.  

• Примеры: срган, аниме шар, 8x nkd.  

• Настройки: обскейл бай, количество шагов, сила изменения.  

• Таял вайт и таял хайт определяют размер секций.  

• Таял паддинг сглаживает швы между плитками.  

• Промт может содержать текст, который будет применяться к каждой плитке.  

• Контрол нет помогает избежать проблем с детализацией.  

• Специальная модель таял в контрол нет предназначена для обскеллера.  

• Подключение контрол нет для улучшения качества изображения.  

• Подключение позитивного и негативного промов.  

• Добавление включателя и двух свечей для управления.  

• Подключение исходного промов и контрол нета.  

• Подключение изображения и контрол нета.  

• Выбор модели таловая для обработки.  

• Подключение вя и завершение сборки схемы.  

• Выбор картинки для обработки.  

• Настройка параметров контрол нета.  

• Запуск процесса аскелинга.  

• Подготовка изображения к скейлу.  

• Предварительная обработка изображения.  

• Завершение аскелинга и получение обработанной картинки.  

• Увеличение детализации изображения.  

• Улучшение качества изображения.  

• Рекомендации по использованию аскелинга для улучшения изображений.  

• Подача картинки и негатива.  

• Размещение модели и контроллеров.  

• Настройка цветов и размеров для удобства.  

• Импинг перерисовка элементов на картинке.  

• Использование специальных моделей для импинга.  

• Примеры моделей с импингом.  

• Создание параллельного воркфлоу.  

• Преобразование изображения в числа с помощью ноды вай э код.  

• Настройка параметров для изменения изображения.  

• Использование маски для выделения области для перерисовки.  

• Настройка размера и цвета маски.  

• Сохранение и очистка маски.  

• Проблемы с размерами изображения.  

• Эффект смазанности при сильном изменении.  

• Необходимость более сложной конструкции для точного импинга.  

• Использование нод инпейн кроп и инпейн стич.  

• Подключение изображения к инпейн кроп для работы с масками.  

• Добавление ноды инпейн модел кадишиинг для улучшения результатов.  

• Добавляем позитивный и негативный промс, красим их в правильные цвета.  

• Подключаем промс к клип и кейс сэмплеру.  

• Добавляем ноду гаусион блюр маск для плавного перехода.  

• Конвертируем маску в изображение и объединяем с крупнутым изображением.  

• Добавляем ноду дифференшил дефьюжен для работы с маской.  

• Подключаем модель к кейс сэмплеру.  

• Перекрашиваем ключевые ноды в желтый цвет и настраиваем параметры.  

• Устанавливаем размер изображения для работы.  

• Рисуем маску и настраиваем модель инпейнт.  

• Подключаем импейнт стич и сохраняем результат.  

• Добавляем контрол нет для улучшения генерации.  

• Подключаем контрол нет модель и настраиваем его работу.  

• Добавляем при процессор для переключения источника изображения.  

• Тестируем генерацию без при процессора и с при процессором.  

• Проверяем результат и корректируем настройки.  

• Подключаем ай-пи адаптер и настраиваем его работу.  

• Загружаем картинку и настраиваем веса и влияние.  

• Тестируем генерацию без контрол нет и корректируем маску.  

• Добавляем группу ин пейнт для финальной настройки.  

• Тестируем финальную генерацию и корректируем цвета и детали.  

• Проверяем результат и завершаем работу.  

• Переносим загрузчик и позитивный и негативный промт.  

• Добавляем импн кро и гау.  

• Переносим сэмплер и дифференшил дефьюж.  

• Сворачиваем ненужные ноды и переносим контрол нет.  

• Добавляем при процессор и основной контрол.  

• Переносим зону и ай-пи адаптер.  

• Добавляем изображение и превью имидж.  

• Объясняем, как автоматик сохраняет параметры.  

• Проблема несовместимости параметров между автоматиком и конфи.  

• Введение ноды сд промсейвер для сохранения параметров.  

• Конвертируем параметры для передачи ноде.  

• Конвертируем модель, вай, сид, степс, кфг, сэмплер нейм, шедалер, вайт, хайт, позитив и негатив.  

• Добавляем уникальные имена файлов для предотвращения дубликатов.  

• Перемещение генерации изображения для подключения параметров.  

• Использование ноды гет имидж сайз для получения размеров изображения.  

• Конвертация текста в числовое пространство с помощью виджету стринг.  

• Подключение параметров через конвертер.  

• Подключение сэмплерных параметров и шедалер-планировщика.  

• Сворачивание ненужных нод для экономии места.  

• Подключение шедлера и конвертера.  

• Перенос виджета и модульных узлов.  

• Проблемы с подключением узла лора и возможные решения.  

• Удаление ненужных узлов и параметров.  

• Настройка параметров сохранения изображений.  

• Пример названия файла с датой, временем, моделью и сэмплером.  

• Генерация изображений и их сохранение.  

• Влияние названия узла на его размер.  

• Пример сохранения изображения с параметрами.  

• Программа для анализа параметров изображений.  

• Сравнение параметров сохраненных изображений.  

• Преимущества использования программы для анализа.  

• Сохранение и восстановление рабочих процессов.  

• Экспорт и импорт рабочих процессов.  

• Пример использования программы для сохранения и восстановления.  

• Описание итогового рабочего процесса.  

• Группы узлов и их функции.  

• Примеры использования различных узлов и их взаимодействие.  

• Обзор всех узлов и их функций.  

• Преимущества аккуратного и выровненного рабочего процесса.  

• Благодарность за просмотр и прощание.