Генерация видео

Чем генерация видео отличается от картинок, какие бывают видеографы и где читать дальше.

Простыми словами

Для видеомодели ролик это стопка кадров, нарисованная сразу целиком, чтобы движение держалось вместе. У латента кроме ширины и высоты есть время, и VAE сжимает кадры ещё и по времени. Всё, что есть в графе картинки, остаётся: загрузчики, текстовый энкодер, сэмплер, раскрытие VAE. Новое: длина, частота кадров, нода, которая собирает кадры в ролик, и намного больше памяти.

Какие бывают видеографы

ВидС чего начинаетсяГде читать
Видео из текстаПромпт и пустой видеолатентУрок: Видео из текста
Видео из картинкиКартинка как первый кадрУрок: Видео из картинки
Первый и последний кадрДве картинки, ролик заполняет промежутокПервый и последний кадр
Видео из видеоДвижение, глубина, поза или камера другого видеоВидео из видео
Анимация по позеКартинка героя и ведущее видеоАнимация по позе
Говорящие портретыПортрет и запись голосаГоворящие портреты
Видео со звукомПромпт; звук тоже создаётся (LTX-2, Ovi)Звук

Где встречается в графе

  • Пустые видеолатенты: EmptyHunyuanLatentVideo (Wan 14B, HunyuanVideo), Wan22ImageToVideoLatent (Wan 2.2 5B), EmptyLTXVLatentVideo (LTX).
  • Ноды начала, которые прикрепляют картинку: WanImageToVideo, WanFirstLastFrameToVideo и другие.
  • После VAE Decode кадры это пачка IMAGE. Create Video собирает их с fps (и по желанию audio) в VIDEO, Save Video пишет файл. Load Video и Get Video Components делают обратное.
  • Семейства для видео, которые знает приложение: Wan 2.1, Wan 2.2, HunyuanVideo, LTX-2.

Что меняется по сравнению с картинками

Частые ошибки

Пустой латент для картинки в видеографе; fps, не совпадающий с моделью; ролик слишком длинный для памяти; модели t2v для видео из картинки.

Как помогает приложение

Группы уроков Видео, Видео: опорная картинка, WanVideoWrapper и Паки и инструменты собирают графы видео на Wan, LTX, HunyuanVideo и Kandinsky (см. Уроки), а описания нод охватывают основные загрузчики и сэмплеры.

См. также

Страница перенесена из wiki репозитория приложения (docs/wiki/concepts/Video-Models.ru.md, ревизия b8e3f71). То же руководство встроено в приложение: «Справка ▸ Руководство».

Чтобы обновить её, выполните npm run import, а затем npm run build в папке сайта.