SamuKata
OreX
OreX

boosty


Flux Lora - ControlNet - IPadapter - GGUF - NF4 | Forge - ComfyUI

СМОТРЕТЬ НА YOUTUBE
СМОТРЕТЬ НА RUTUBE
🪛ДОПОЛНЕНИЯ
- В видео говорю что для FORGE нужно положить модели в папку Clip, но нужно их положить в папку text_encoder. В инструкции ниже поправил.
- На 3060 12Гб модель NF4 v2 работает быстрее чем GGUF.
Flux на Forge и Comfyui. В этом видео вы узнаете как подключать Flux Lora, Flux ControlNet, Flux ip-adapter. Увидите как отличаются модели Flux GGUF, NF4, FP8. Познакомитесь с универсальной схемой comfyui Flux с возможностью переключения моделей Flux и GGUF, а так же подключением LORA, ControlNet и ipadapter. Схема оптимизирована для наименьшего потребления видеопамяти. Upscale Flux Forge. Inpaint Flux Forge.
МЕНЮ
01:17 - Сравнение GGUF NF4 FP8 по скорости и VRAM
03:31 - Как подключить GGUF в Forge
07:46 - Flux настройки
10:07 - Подключение LORA
10:46 - Upscale Flux
12:55 - Inpaint Flux
14:22 - ComfyUI схема - установка
16:26 - Куда поместить модели
18:48 - Почему в схеме нет модели NF4
20:16 - Обзор схемы ComfyUI
22:21 - Flux ControlNet
24:55 - Flux Ipadapter
25:42 - Частые ошибки
27:06 - Как самостоятельно подключить NF4 модель
27:55 - Если узел LORA не устанавливается  
ИНСТРУКЦИЯ ПО FORGE
1. Установите FORGE можете воспользоваться моей сборкой из дополнительных ссылок (выше).
2.1 Модели, если у вас 12Гб VRAM и менее, то ставьте 
GGUF DEV (можно скачать Q4 6.79 Гб) ИЛИ GGUF Schnell WOW
(models/Stable-diffusion)
GGUF T5 (можно качать Q4 2.9 Гб)
clip_l.safetensors
(models/text_encoder)
ae.safetensors (Зеркало)
(models/VAE)
2.2 Модели, если у вас более 12Гб VRAM то ставьте
flux1-dev-bnb-nf4-v2.safetensors - 12 Гб
ИЛИ  flux1-schnell-bnb-nf4.safetensors - 11,5 Гб
3. LORA:
- Волк Ну Погоди:
ССЫЛКА
- NSFW: ССЫЛКА
- Vector art & Line art: ССЫЛКА
- БОЛЬШОЙ НАБОР ССЫЛКОК LORA
ИНСТРУКЦИЯ ПО COMFYUI
1. Установить ComfyUI по любому другому видео по ComfyUI, НАПРИМЕР ЭТО: ССЫЛКА
2.1 Скачать модели (если менее или равно 12 Гб VRAM):
GGUF DEV (можно скачать Q4 6.79 Гб)
(models/diffusion_models)
2.2 Скачать модели (если более 12 Гб VRAM)
flux1-dev-fp8.safetensors - 11,9 Гб
(models/diffusion_models)
2.3 Скачать модели в обоих случаях:
GGUF Schnell WOW (6.14 Гб) (если нужна turbo модель вместо Dev)
(models/diffusion_models)
GGUF T5 (можно качать Q4 2.9 Гб)
clip_l.safetensors
(models/CLIP)
ae.safetensors (зеркало)
(models/VAE)
3. Схема для ComfyUI из видео:
FLUX - all in one - workflow.png
4. Модели ControlNet: СКАЧАТЬ
Скачивайте V3 или выше
(models\xlabs\controlnets) путь появится после установки узлов
5. Модель flux-ip-adapter.safetensors: СКАЧАТЬ
(models\xlabs\ipadapters)
6. flux-clip_vision_l.safetensors: ССЫЛКА
(models/clip_vision)
7. Для узла дополняющего подсказку Searge LLM Node нужна модель Mistral-7B-Instruct-v0.3.Q4_K_M.gguf: ССЫЛКА
(models\llm_gguf) папку llm_gguf создать и туда поместить скаченную модель. Этот узел можно выключить, он не обязателен.
8. LORA см. пункт 3 инструкции FORGE
9. Для поддержки узлов NF4 поставьте этот узел по ссылке: ССЫЛКА
ВСЕ ВИДЫ МОДЕЛЕЙ (см. инструкции)
МОДЕЛИ (+CLIP-L +T5 +VAE)
flux1-dev-bnb-nf4-v2.safetensors - 12 Гб
flux1-schnell-bnb-nf4.safetensors - 11,5 Гб
flux1-dev-fp8.safetensors - 17.2 Гб
flux1-schnell-fp8.safetensors - 17.2 Гб
ТОЛЬКО UNET МОДЕЛЬ (БЕЗ CLIP-L, T5, VAE)
flux1-dev-fp8.safetensors - 11,9 Гб
flux1-dev.safetensors (FP16) - 23.8 Гб
flux1-schnell-fp8-e4m3fn.safetensors - 11,9 Гб
- GGUF DEV (можно скачать Q4 6.79 Гб)
- GGUF Schnell (можно скачать Q4 6.77 Гб)
- GGUF Schnell WOW (6.14 Гб)
flux1-dev-bnb-nf4-v2-unet.safetensors - 6.7 Гб
flux1-schnell-bnb-nf4-v2-unet.safetensors - 6.69 Гб
МОДЕЛИ T5
GGUF T5 (можно качать Q4 2.9 Гб)
t5xxl_fp8_e4m3fn.safetensors (4.89 Гб)
t5xxl_fp16.safetensors (9.79 Гб)
VAE (335 Мб)
ae.safetensors
CLIP-L (246 Мб)
clip_l.safetensors
ДОПОЛНИТЕЛЬНЫЕ ССЫЛКИ
Страница разработчика FORGE: ССЫЛКА
Моя сборка Forge с Flux тут: YOUTUBE  RUTUBE  СБОРКА

Flux Lora - ControlNet - IPadapter - GGUF - NF4 | Forge - ComfyUI Flux Lora - ControlNet - IPadapter - GGUF - NF4 | Forge - ComfyUI

Comments

<div ><div><span class="text">OreX, спасибо</span></div></div>

Dima Sugatov

<div ><div><span class="text">Flux All in One.json Сказал что тут есть на бусти, где?  </span></div></div>

Dima Sugatov

<div ><div><span class="text">Привет! А где мне взять workflow файл .json??? </span></div></div>

Dima Sugatov

<div ><div><span class="text">OreX, да, регистрация есть. Эта ссылка без проблем открылась.</span></div><div></div></div>

leo lim

<div ><div><span class="link"><a class="link" href="https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/ae.safetensors">ae.safetensors</a></span><span class="text">  ссылки не работают, файл не найден. Удалили?</span></div><div></div></div>

leo lim

<div ><div><span class="text">скрин на всякий прилагаю с лорой.<br>но, когда лору отключила - всеравно теперь это пишет((<br>помогла только полная перезагрузка комфи - опять начал генерить </span></div><div></div><div><div class="image"><img id="2b68cf38-cfbb-49a6-8785-6ec95053d99b" src="https://images.boosty.to/image/2b68cf38-cfbb-49a6-8785-6ec95053d99b?change_time=1742727752" change_time="1742727752" width="1168" height="674" style="max-width: 100%; height: auto;"></div></div>

Zara Andre


More Creators