Nodo AnimateDiff Loader (Evolved) in ComfyUI
AnimateDiff Loader aggiunge un modulo di movimento a un modello SD 1.5 o SDXL così un batch di latenti viene reso come fotogrammi di animazione coerenti, il modo classico per fare brevi clip da testo con Stable Diffusion.
Cosa fa AnimateDiff Loader (Evolved)
AnimateDiff inserisce layer di attenzione temporale (un modulo di movimento come mm_sd_v15_v2, v3_sd15_mm o AnimateLCM) nell'UNet. Il pacchetto ComfyUI-AnimateDiff-Evolved di Kosinkadink lo espone come AnimateDiff Loader (Gen1) e i nodi più recenti Gen2 (Use Evolved Sampling, Apply AnimateDiff Model, Context Options). Il sampler poi tratta un batch di latenti (16-32 fotogrammi) come una sequenza, con Context Options che fa scorrere una finestra di 16 fotogrammi su clip più lunghe.
Motion LoRA aggiungono panoramiche e zoom, e AnimateLCM o il sampler LCM riducono il tempo di rendering a pochi passi. I fotogrammi escono come un batch di IMAGE, che Video Combine di VideoHelperSuite trasforma in MP4 o GIF. Con Wan, Hunyuan e LTX ora disponibili, AnimateDiff resta popolare per animazioni stilizzate SD 1.5 e per video-to-video con ControlNet.
Ingressi
Nome | Tipo | Cos'è |
|---|---|---|
model | MODEL | Un modello checkpoint SD 1.5 (o SDXL con il modulo beta SDXL). |
model_name | COMBO | Modulo di movimento da models/animatediff_models. |
beta_schedule | COMBO | sqrt_linear (AnimateDiff) per la maggior parte dei moduli; varianti lcm per AnimateLCM. |
context_options | CONTEXT_OPTIONS | Impostazioni opzionali per la finestra scorrevole su più di 16 fotogrammi. |
motion_lora | MOTION_LORA | LoRA opzionale per il movimento della camera. |
Uscite
Nome | Tipo | Cos'è |
|---|---|---|
MODEL | MODEL | Il modello con i layer di movimento; collegalo a KSampler. |
Come usare AnimateDiff Loader (Evolved)
- Installa ComfyUI-AnimateDiff-Evolved e ComfyUI-VideoHelperSuite dal Manager; scarica mm_sd_v15_v2.ckpt o v3_sd15_mm.ckpt in models/animatediff_models.
- Carica un checkpoint SD 1.5 e collega MODEL a AnimateDiff Loader.
- Imposta Empty Latent Image batch_size a 16 (fotogrammi) a 512x512 o 512x768.
- Campiona con 20-25 passi, cfg 7, e decodifica con VAE Decode.
- Collega il batch IMAGE a Video Combine (frame_rate 8-12, formato video/h264-mp4).
Impostazioni e consigli
- Context Options Looped Uniform con context_length 16 e overlap 4 gestisce clip da 32-64 fotogrammi.
- Prompt scheduling (FizzNodes BatchPromptSchedule) cambia il prompt nel tempo.
- Abbinalo a un ControlNet Tile o Lineart sui fotogrammi video per video-to-video.
- AnimateLCM con il sampler LCM e 6-8 passi rende molto più veloce.
- Mantieni risoluzioni tra 512 e 768; i moduli di movimento SD 1.5 sono stati addestrati a 256-512.
Risoluzione dei problemi di AnimateDiff Loader (Evolved)
I fotogrammi sono immagini scollegate, niente movimento
Perché succede
Il loader non è collegato al sampler, o il batch size è 1.
Come risolverlo
Collega il MODEL del loader a KSampler e imposta Empty Latent Image batch_size a 16 o più.
Errore: modulo di movimento incompatibile col modello (SD1.5 vs SDXL)
Perché succede
Un modulo di movimento SD 1.5 con checkpoint SDXL o viceversa.
Come risolverlo
Usa mm_sdxl_v10_beta con SDXL, o un checkpoint SD 1.5 con i moduli sd15.
Sfarfallio e cambi di colore tra i fotogrammi
Perché succede
Cfg alto, prompt molto dettagliato, o nessuna sovrapposizione di contesto su clip lunghe.
Come risolverlo
cfg 6-7, overlap 4+, e aggiungi un ControlNet Tile o abbassa il denoise in vid2vid.
Memoria esaurita con 32 fotogrammi
Perché succede
Tutti i fotogrammi vengono campionati insieme; la VRAM cresce col batch size.
Come risolverlo
Usa Context Options (finestra di 16), abbassa la risoluzione, o avvia con --lowvram.
Domande su AnimateDiff Loader (Evolved)
Nodi Gen1 o Gen2?
Gen2 (Use Evolved Sampling + Apply AnimateDiff Model) è modulare e supporta più funzioni; Gen1 Loader è più semplice per il primo clip.
AnimateDiff funziona con Flux?
No. Per text-to-video moderno usa Wan 2.x, HunyuanVideo o LTX-Video con i loro nodi.
Nodi correlati
Video Combine (VideoHelperSuite)
ComfyUI-VideoHelperSuite
Video Combine trasforma un batch di immagini in un MP4, WebM, GIF o sequenza di immagini a una frequenza di fotogrammi scelta, con audio opzionale, numero di loop e ping-pong, il nodo di output standard per ogni flusso video.
Load Checkpoint
ComfyUI core
Load Checkpoint (CheckpointLoaderSimple) apre un file modello .safetensors o .ckpt e fornisce le tre parti di cui ogni workflow ha bisogno: il MODEL di diffusione, l'encoder testuale CLIP e il VAE.
Empty Latent Image
ComfyUI core
Empty Latent Image crea la tela latente vuota (larghezza, altezza, batch_size) da cui parte il campionamento testo-immagine; le dimensioni devono essere multipli di 8 e corrispondere alla famiglia del modello.
KSampler
ComfyUI core
KSampler esegue il ciclo di denoising: prende il modello, i prompt e un latente e produce l'immagine latente finita, controllata da seed, passi, cfg, sampler, scheduler e denoise.
Apply ControlNet
ComfyUI core
Apply ControlNet collega un'immagine guida e un ControlNet caricato al CONDITIONING positivo e negativo con forza e percentuali di inizio/fine, così il sampler segue i bordi, la profondità o la posa dell'immagine guida.
Altri nodi ComfyUI
CLIP Text Encode (Prompt)
ComfyUI core
CLIP Text Encode trasforma un prompt di testo in CONDITIONING usando l'encoder testuale del modello. Un nodo contiene il prompt positivo, un altro quello negativo.
ComfyUI Manager
ComfyUI-Manager
ComfyUI Manager è l’estensione che installa, aggiorna e sistema i pacchetti di nodi personalizzati e i modelli direttamente dall’interfaccia, risolve i nodi mancanti nei workflow importati e salva la tua configurazione.
Save Image
ComfyUI core
Save Image salva il tensore IMAGE in ComfyUI/output come PNG, con tutto il flusso di lavoro incorporato nei metadati del file così puoi trascinare l'immagine di nuovo in ComfyUI per ripristinare il grafico.
VAE Decode
ComfyUI core
VAE Decode trasforma il LATENT campionato in un'immagine a pixel usando il VAE; VAE Decode (Tiled) fa lo stesso a pezzi per immagini molto grandi.
Load Image
ComfyUI core
Load Image carica un'immagine dalla cartella di input di ComfyUI (o da un upload) e produce un tensore IMAGE più una MASK ricavata dal canale alfa, il punto di partenza per img2img, inpainting, ControlNet e IP-Adapter.
Load LoRA
ComfyUI core
Load LoRA (LoraLoader) applica un file LoRA al MODEL e al CLIP con intensità separate, così puoi aggiungere uno stile, un personaggio o un concetto a qualsiasi checkpoint senza doverlo unire.