Model
.ai
стежимо за відкритими ШІ-моделями

Генерація відео на основі ШІ для початківців: зображення у відео, текст у відео та перший кліп з Wan, LTX-2 і H3

Тема: Відеомоделі
Автор: Lookout
Опубліковано 29 Кві 2026

Огляд

Відеомоделі — це моделі зображень з часовою віссю: той самий цикл денойзингу працює одразу на блоці кадрів, тому все, що ти знаєш про промпти, сид і денойз, тут теж працює, а також вартість, помножена на кількість кадрів. Практичні наслідки для початківця такі. Починай з image-to-video (I2V), бо хороший статичний кадр із моделі зображень фіксує композицію і стиль, і відеомодель має лише вигадувати рух. Тримай кліпи короткими (приблизно п’ять секунд), бо саме на такому матеріалі тренували моделі. І очікуй запускати великі моделі в хмарі, якщо в тебе немає відеокарти на 24 ГБ.
Три відкриті сімейства покривають більшість потреб у 2026 році. Wan 2.2 (Alibaba) — універсальна модель: 5B, що працює на 12-16 ГБ, і 14B з двома експертами з найкращою відкритою якістю, плюс величезна екосистема LoRA для руху і стилю. LTX-2 (Lightricks) швидка і генерує синхронізований звук, але хоче 24-32 ГБ. MiniMax H3 — аудіо-відео модель з діалогами і звуковими ефектами, здебільшого використовується через хостингові робочі процеси; на цьому сайті є глибокі гіди з промптингу H3 від Марка Вайта. Hunyuan Video 1.5 — легша альтернатива Wan 14B.
Каталог містить кожну відеомодель і її LoRA з базою і розміром, на який вони орієнтовані (5B або 14B, експерт з високим або низьким рівнем шуму), а сторінки моделей показують приклади кліпів з їхніми промптами. Кнопка Run відкриває модель на PirateDiffusion, де робочий процес створює кліп у відповідь на твоє зображення, або на BitVector.

Довідник

Назва
Тип
Що це
I2V (image to video)
mode
Анімувати статичне зображення. Найкращий перший режим: композиція вже правильна; промпт описує лише рух.
T2V (text to video)
mode
Тільки з промпта. Більше варіацій, менше контролю; використовуй для ідей і додаткових кадрів.
FLF2V / first-last frame
mode
Два ключові кадри; модель заповнює рух між ними. Контрольовані переходи.
Frames and fps
setting
Wan: 81 кадр при 16 fps (5 с); LTX-2: 97-121 кадр при 24-25 fps; H3: 145 кадрів приблизно при 24 fps. Пам’ять зростає з кількістю кадрів.
Resolution
setting
Wan 2.2: 832x480 або 480x832 (швидко), 1280x720 (24 ГБ і більше); LTX-2 до 1080p+ з 32 ГБ. Портрет для людей, ландшафт для сцен.
Motion prompt
prompt
Рух одного об’єкта плюс рух камери: «вона повертається до вікна і посміхається; повільне наближення». Уникай перерахування деталей сцени, які вже є на зображенні.
Steps / CFG / shift
setting
Wan 2.2 14B: 20 кроків, розділених 10/10 між експертами, CFG 3.5, shift 5; 5B: 20-30 кроків, CFG 5; LTX-2: 25-30 кроків за власним графіком; дистильовані LoRA (lightx2v) дають Wan 4-8 кроків при CFG 1.
Motion LoRAs
file
Рухи камери, танці, жести, фізика; підібрані під 5B/14B і експерта. Сторінки тут називають ціль.
Interpolation and upscale
post
RIFE або FILM до 32-60 fps; покадровий ESRGAN або SeedVR для роздільної здатності.

Покроково

  1. Створи або вибери статичне зображення: рендер 1024x1024 або 832x1216 з чітким об’єктом і простим фоном. Обличчя, що займають більше десятої частини кадру, анімуються найкраще.
  2. Відкрий сторінку моделі Wan 2.2 I2V на цьому сайті, скопіюй приклад шаблону промпта для руху і натисни кнопку Run (PirateDiffusion: відповідай на своє зображення командою /workflow; BitVector: завантаж і вибери модель).
  3. Напиши промпт руху з одного речення для об’єкта і одного для камери. Нічого про одяг, кольори чи освітлення; це вже є на зображенні.
  4. Згенеруй при 832x480 (ландшафт) або 480x832 (портрет), 81 кадр, стандартні кроки. Переглянь увесь кліп; оцінюй рух, а не різкість.
  5. Внось зміни лише в промпт руху: повільніші дієслова («повільно», «ніжно») зменшують хаотичність; одна інструкція для камери запобігає стрибкам.
  6. Локально, з відеокартою 16 ГБ: Wan 2.2 5B fp8 або GGUF, 832x480, 49-81 кадр, текстовий енкодер на CPU. З 24 ГБ: 14B fp8 на 480p, 720p з відключеним енкодером. Дивись гайд VRAM для AI відео.
  7. Довші відео: візьми останній кадр першого кліпу як початкове зображення другого з продовженням промпта руху; з’єднай у редакторі; в кінці зроби інтерполяцію до 30 fps і апскейл.
  8. Додай звук: LTX-2 і H3 генерують аудіо разом з кліпом; для Wan додавай музику або ефекти в редакторі.

Приклади

Промпт руху для I2V

Positive: she lifts the coffee cup, takes a sip and looks out of the window; slow push-in, shallow depth of field, natural motion
Negative (Wan): static, blurry, distorted face, extra fingers, jump cut, text

Команда робочого процесу PirateDiffusion

/workflow /run:wan22-i2v she lifts the coffee cup and looks out of the window, slow push-in /length:81 (as a reply to the still)

ComfyUI Wan 2.2 5B на 16 ГБ

UnetLoaderGGUF wan2.2_ti2v_5B_Q8_0 | CLIPLoader umt5_xxl_fp8 (cpu) | Wan VAE 2.2 | WanImageToVideo 832x480, 81 frames | KSampler 24 steps, cfg 5, uni_pc, simple | VAE Decode (Tiled)

Поради

  • Дієслова руху важливіші за прикметники: «повертається, йде, піднімає, наливає, махає» дають чіткий, надійний рух; «красивий кінематографічний» нічого не дає.
  • Один рух камери на кліп: наближення, віддалення, панорама вліво, орбіта. Два рухи дають тремтіння.
  • Портретні статичні зображення краще анімують обличчя; ландшафтні — середовища.
  • Wan LoRA для експерта з високим шумом формують рух; для експерта з низьким шумом — деталі. Багато пакетів мають обидва; завантажуй кожен на свого експерта.
  • Дистильовані LoRA (lightx2v, FastWan) скорочують Wan з 20 кроків до 4-6 при CFG 1 без великої втрати якості; сторінки моделей їх перераховують.
  • Очікуй 3-10 хвилин на кліп на 4090 для Wan 14B і близько 90 секунд для LTX-2; хмара повертає більшість кліпів за хвилину чи дві.

Усунення проблем

Кліп — це статичне зображення з легким мерехтінням

Чому це стається
У промпті немає дієслова руху або занадто високий статичний ваговий коефіцієнт LoRA.

Як виправити
Додай рух об’єкта і рух камери; знизь вагу LoRA до 0.7.

Обличчя розпливається або змінює вигляд

Чому це стається
Обличчя занадто маленьке, забагато кадрів або 480p на деталізованому обличчі.

Як виправити
Обріж ближче, 49-61 кадр, або 720p у хмарі; останній варіант — проходження деталізації обличчя для кожного кадру.

Стрибки камери або різкий перехід сцени

Чому це стається
Дві інструкції для камери або слова «cut to» в промпті.

Як виправити
Один рух камери; додай «jump cut» у негативний промпт.

Недостатньо пам’яті на 720p

Чому це стається
Кількість кадрів помножена на роздільну здатність перевищує VRAM.

Як виправити
Зменш до 480p або менше кадрів, відключи текстовий енкодер; дивись гайд VRAM для AI відео.

LoRA для руху не працює

Чому це стається
Завантажено на неправильного експерта або неправильний розмір моделі.

Як виправити
Перевір сторінку моделі на 5B/14B і високий/низький шум; завантаж відповідно з потрібним тригером.

Запитання

Яку відеомодель вибрати першою?

Wan 2.2 I2V: простіша, добре документована, найбільше LoRA. Повний гайд із налаштування є в розділі для початківців Wan.

Чи можна це робити на карті 8 ГБ?

Короткі кліпи 480p з Wan 2.1 1.3B або Wan 2.2 5B GGUF, повільно. Реалістично — починай у хмарі.

Як отримати звук?

LTX-2 і MiniMax H3 генерують синхронізований звук; гіди Марка Вайта з промптингу H3 пояснюють діалоги і ефекти.

Якою може бути довжина кліпу?

Приблизно п’ять секунд нативно. Довші — це ланцюжок кліпів; якість падає після шести-восьми секунд за один прохід.

Чи доступні найновіші комерційні моделі (Veo, Kling, Wan 3.0) локально?

Ні; вони тільки через API. Все в цьому гайді — відкриті ваги, працюють локально або в хмарі.

Моделі в цьому посібнику

Автор
Сидить у вишці, оновлюючи Hugging Face, щоб вам не доводилось. Повідомляє про нову модель у момент її виходу і знову, коли її тихо перевантажують з виправленою конфігурацією. Жодного разу не був досить рано. Довіряє файлу ліцензії більше, ніж відео запуску.
Всі посібники від Lookout

Інші посібники