Вышла обновление одной из лучших моделей для генерации видео и изображений - модель Wan 2.2.
Сегодня я вам покажу хорошую схему для ComfyUI, text и image to video, с подобранными параметрами, чтобы получить хорошее качество и высокую скорость. Схема поддерживает модели fp16, fp8 и gguf, благодаря этому она будет доступна для большинства пользователей.
Для тех кто не работает в ComfyUI покажу как работать с этой моделью в отдельном удобном веб интерфейсе Wan2GP, с объемом VRAM от 6Гб.
Чем эта модель лучше чем wan 2.1 и какие у неё особенности:
- У новой модели более сложная генерация движения, благодаря тому что эта модель обучалась на 66% большем объеме изображений и на 83% большем объеме видео.
- Эта модель еще лучше работает с кинематографическим стилем и понимает многие типы типы освещения, композиции, контрастности и цветового тона. Это достигнуто благодаря тщательно подобранному датасету с подробными метками описания.
МЕНЮ
00:00 - Что такое Wan 2.2 и чем она лучше wan 2.1
03:43 - Как установить Wan2GP
05:43 - Text to Video в Wan2GP
14:35 - Image to Video в Wan2GP
14:39 - Как сохранять пресеты в Wan2GP
16:54 - Потребление ресурсов Wan2.2 в Wan2GP
19:41 - Как установить ComfyUI
20:27 - Где скачать модели Wan 2.2
23:29 - Подготовка схемы comfyui
24:12 - Обзор схемы wan 2.2 comfyui
30:46 - Расширенный набор семплеров в comfyui
34:16 - Схема Image to Video ComfyUI
36:46 - Продолжение видео по последнему кадру.
ИНСТРУКЦИЯ Wan2GP
Настроенная сборка WAN2GP Portable тут: ССЫЛКА И все инструкции по её установке, обновлению и запуску тоже тут.
Пост обновляется.
ИНСТРУКЦИЯ ComfyUI
1. Установите настроенную сборку ComfyUI с triton или без него по этому посту и видео: ССЫЛКА (установка заключается в банальной распаковки архива)
Обновите ComfyUI файлом: oX-UPDATE-comfyui-with-simbolic-link-models.bat
или update\update_comfyui.bat (если нет символических ссылок).
2. Text to Video 14B
✔️ wan2.2_t2v_high_noise_14B_fp8_scaled: ССЫЛКА wan2.2_t2v_high_noise_14B_fp16_scaled: ССЫЛКА ✔️ wan2.2_t2v_low_noise_14B_fp8_scaled: ССЫЛКА wan2.2_t2v_low_noise_14B_fp16_scaled: ССЫЛКА ( models \ Diffusion_Models )
3. Image to Video 14B
✔️ wan2.2_i2v_high_noise_14B_fp8_scaled: ССЫЛКА wan2.2_i2v_high_noise_14B_fp16_scaled: ССЫЛКА ✔️ wan2.2_i2v_low_noise_14B_fp8_scaled: ССЫЛКА wan2.2_i2v_low_noise_14B_fp16_scaled: ССЫЛКА ( models \ Diffusion_Models )
4. Wan2.1_vae.safetensors: ССЫЛКА (models / vae)
5. Umt5_xxl_fp8_e4m3fn_scaled: ССЫЛКА (models / clip)
6. Модели 14B GGUF если VRAM менее 12Гб:
Image to Video: ССЫЛКА
Text to Video: ССЫЛКА ( models \ Diffusion_Models )
7. Loras:
(models / loras)
8. Схема text + image to video ComfyUI:
9. Для установки расширенных семплеров и планировщиков откройте и нажмите Install и потом Restart.
Установленные узлы подгрузят новые семплеры и планировщики, которые будут доступны даже в базовых ksamplers.
Архив с тестами разных планировщиков, время генерации в заметках схемы:
10. WAN - типы композиций, освещения и видов съемки
ДОПОЛНИТЕЛЬНЫЕ ССЫЛКИ
1. Страница разработчика WAN: ССЫЛКА 2. Генерация на WAN онлайн бесплатно: ССЫЛКА 3. Страница разработчика Wan2GP: ССЫЛКА 4. Узлы с доп. семплерами: ССЫЛКА
🔥 Курс по "AUTOMATIC 1111" с поддержкой на сайте: ССЫЛКА 🔥 Курс по "ComfyUI" с поддержкой на сайте: ССЫЛКА 📺Присоединиться к стримам (+архив): ССЫЛКА