Flux Lora - ControlNet - IPadapter - GGUF - NF4 | Forge - ComfyUI
Added 2024-09-14 05:01:00 +0000 UTC
🪛ДОПОЛНЕНИЯ
- В видео говорю что для FORGE нужно положить модели в папку Clip, но нужно их положить в папку text_encoder. В инструкции ниже поправил.
- На 3060 12Гб модель NF4 v2 работает быстрее чем GGUF.
Flux на Forge и Comfyui. В этом видео вы узнаете как подключать Flux Lora, Flux ControlNet, Flux ip-adapter. Увидите как отличаются модели Flux GGUF, NF4, FP8. Познакомитесь с универсальной схемой comfyui Flux с возможностью переключения моделей Flux и GGUF, а так же подключением LORA, ControlNet и ipadapter. Схема оптимизирована для наименьшего потребления видеопамяти. Upscale Flux Forge. Inpaint Flux Forge.
МЕНЮ
01:17 - Сравнение GGUF NF4 FP8 по скорости и VRAM 03:31 - Как подключить GGUF в Forge 14:22 - ComfyUI схема - установка 16:26 - Куда поместить модели 18:48 - Почему в схеме нет модели NF4 20:16 - Обзор схемы ComfyUI 27:06 - Как самостоятельно подключить NF4 модель 27:55 - Если узел LORA не устанавливается
ИНСТРУКЦИЯ ПО FORGE
1. Установите FORGE можете воспользоваться моей сборкой из дополнительных ссылок (выше).
(models/Stable-diffusion)
GGUF T5 (можно качать Q4 2.9 Гб)
(models/VAE)
3. LORA:
- Волк Ну Погоди: ССЫЛКА - Vector art & Line art: ССЫЛКА
ИНСТРУКЦИЯ ПО COMFYUI
1. Установить ComfyUI по любому другому видео по ComfyUI, НАПРИМЕР ЭТО: ССЫЛКА 2.1 Скачать модели (если менее или равно 12 Гб VRAM):
(models/diffusion_models)
(models/diffusion_models)
2.3 Скачать модели в обоих случаях: (models/diffusion_models)
GGUF T5 (можно качать Q4 2.9 Гб)
(models/VAE)
3. Схема для ComfyUI из видео:
Скачивайте V3 или выше
(models\xlabs\controlnets) путь появится после установки узлов
5. Модель flux-ip-adapter.safetensors: СКАЧАТЬ (models\xlabs\ipadapters)
6. flux-clip_vision_l.safetensors: ССЫЛКА (models/clip_vision)
7. Для узла дополняющего подсказку Searge LLM Node нужна модель Mistral-7B-Instruct-v0.3.Q4_K_M.gguf: ССЫЛКА (models\llm_gguf) папку llm_gguf создать и туда поместить скаченную модель. Этот узел можно выключить, он не обязателен.
8. LORA см. пункт 3 инструкции FORGE
9. Для поддержки узлов NF4 поставьте этот узел по ссылке: ССЫЛКА
ВСЕ ВИДЫ МОДЕЛЕЙ (см. инструкции)
МОДЕЛИ T5
VAE (335 Мб)
CLIP-L (246 Мб)
ДОПОЛНИТЕЛЬНЫЕ ССЫЛКИ
Страница разработчика FORGE: ССЫЛКА