Node AnimateDiff Loader (Evolved) di ComfyUI
AnimateDiff Loader menambahkan modul gerak ke model SD 1.5 atau SDXL supaya batch latent dirender jadi frame animasi yang nyambung, cara klasik buat bikin klip pendek dari teks pakai Stable Diffusion.
Apa yang dilakukan AnimateDiff Loader (Evolved)
AnimateDiff menyisipkan lapisan perhatian temporal (modul gerak seperti mm_sd_v15_v2, v3_sd15_mm atau AnimateLCM) ke dalam UNet. Paket ComfyUI-AnimateDiff-Evolved dari Kosinkadink menampilkan ini sebagai AnimateDiff Loader (Gen1) dan node Gen2 yang lebih baru (Use Evolved Sampling, Apply AnimateDiff Model, Context Options). Sampler lalu memperlakukan batch latent (16-32 frame) sebagai urutan, dengan Context Options yang menggeser jendela 16 frame untuk klip yang lebih panjang.
Motion LoRA menambahkan gerakan kamera seperti pan dan zoom, dan AnimateLCM atau sampler LCM mempercepat waktu render jadi cuma beberapa langkah. Frame yang keluar berupa batch IMAGE, yang bisa diubah jadi MP4 atau GIF pakai Video Combine dari VideoHelperSuite. Dengan adanya Wan, Hunyuan, dan LTX sekarang, AnimateDiff tetap populer buat animasi SD 1.5 yang bergaya dan buat video-ke-video pakai ControlNet.
Input
Nama | Tipe | Artinya |
|---|---|---|
model | MODEL | Model checkpoint SD 1.5 (atau SDXL dengan modul beta SDXL). |
model_name | COMBO | Modul gerak dari models/animatediff_models. |
beta_schedule | COMBO | sqrt_linear (AnimateDiff) untuk kebanyakan modul; varian lcm untuk AnimateLCM. |
context_options | CONTEXT_OPTIONS | Pengaturan jendela geser opsional untuk lebih dari 16 frame. |
motion_lora | MOTION_LORA | LoRA gerakan kamera opsional. |
Output
Nama | Tipe | Artinya |
|---|---|---|
MODEL | MODEL | Model dengan lapisan gerak; sambungkan ke KSampler. |
Cara menggunakan AnimateDiff Loader (Evolved)
- Pasang ComfyUI-AnimateDiff-Evolved dan ComfyUI-VideoHelperSuite dari Manager; unduh mm_sd_v15_v2.ckpt atau v3_sd15_mm.ckpt ke models/animatediff_models.
- Muat checkpoint SD 1.5 dan sambungkan MODEL ke AnimateDiff Loader.
- Atur Empty Latent Image batch_size ke 16 (frame) dengan ukuran 512x512 atau 512x768.
- Sampling dengan 20-25 langkah, cfg 7, dan decode pakai VAE Decode.
- Sambungkan batch IMAGE ke Video Combine (frame_rate 8-12, format video/h264-mp4).
Pengaturan dan tips
- Context Options Looped Uniform dengan context_length 16 dan overlap 4 cocok untuk klip 32-64 frame.
- Prompt scheduling (FizzNodes BatchPromptSchedule) mengubah prompt seiring waktu.
- Gabungkan dengan Tile atau Lineart ControlNet pada frame video untuk video-ke-video.
- AnimateLCM dengan sampler LCM dan 6-8 langkah render jauh lebih cepat.
- Jaga resolusi di 512-768; modul gerak SD 1.5 dilatih di 256-512.
Pemecahan masalah AnimateDiff Loader (Evolved)
Frame jadi gambar acak, tidak ada gerakan
Mengapa terjadi
Loader tidak terhubung ke sampler, atau batch size cuma 1.
Cara memperbaikinya
Sambungkan loader MODEL ke KSampler dan atur Empty Latent Image batch_size ke 16 atau lebih.
Error: modul gerak tidak kompatibel dengan model (SD1.5 vs SDXL)
Mengapa terjadi
Modul gerak SD 1.5 dipakai dengan checkpoint SDXL atau sebaliknya.
Cara memperbaikinya
Gunakan mm_sdxl_v10_beta dengan SDXL, atau checkpoint SD 1.5 dengan modul sd15.
Frame berkedip dan warna berubah antar frame
Mengapa terjadi
cfg terlalu tinggi, prompt sangat detail, atau tidak ada overlap konteks pada klip panjang.
Cara memperbaikinya
Gunakan cfg 6-7, overlap 4+, dan tambahkan Tile ControlNet atau turunkan denoise di vid2vid.
Kehabisan memori dengan 32 frame
Mengapa terjadi
Semua frame disampling sekaligus; VRAM naik sesuai batch size.
Cara memperbaikinya
Gunakan Context Options (jendela 16), turunkan resolusi, atau mulai dengan --lowvram.
Pertanyaan tentang AnimateDiff Loader (Evolved)
Node Gen1 atau Gen2?
Gen2 (Use Evolved Sampling + Apply AnimateDiff Model) lebih modular dan punya fitur lebih banyak; Gen1 Loader lebih sederhana buat klip pertama.
AnimateDiff bisa dipakai dengan Flux?
Tidak. Untuk text-to-video modern pakai Wan 2.x, HunyuanVideo, atau LTX-Video dengan node mereka sendiri.
Node terkait
Video Combine (VideoHelperSuite)
ComfyUI-VideoHelperSuite
Video Combine mengubah batch IMAGE dari frame menjadi MP4, WebM, GIF, atau urutan gambar dengan kecepatan frame yang dipilih, dengan opsi audio, jumlah loop, dan ping-pong, node output standar untuk setiap alur kerja video.
Load Checkpoint
ComfyUI core
Load Checkpoint (CheckpointLoaderSimple) membuka file model .safetensors atau .ckpt dan memberikan tiga bagian yang dibutuhkan setiap workflow: MODEL diffusion, encoder teks CLIP, dan VAE.
Empty Latent Image
ComfyUI core
Empty Latent Image membuat kanvas latent kosong (lebar, tinggi, batch_size) yang jadi titik awal sampling text-to-image; dimensinya harus kelipatan 8 dan sesuai dengan keluarga model.
KSampler
ComfyUI core
KSampler menjalankan loop denoising: dia mengambil model, prompt, dan latent lalu menghasilkan gambar latent yang sudah jadi, dikontrol oleh seed, steps, cfg, sampler, scheduler, dan denoise.
Apply ControlNet
ComfyUI core
Apply ControlNet menempelkan gambar panduan dan ControlNet yang sudah dimuat ke CONDITIONING positif dan negatif dengan kekuatan serta persentase mulai/akhir, supaya sampler mengikuti tepi, kedalaman, atau pose dari panduan tersebut.
Node ComfyUI lainnya
CLIP Text Encode (Prompt)
ComfyUI core
CLIP Text Encode mengubah prompt teks jadi CONDITIONING pakai encoder teks model. Satu node buat prompt positif, yang satunya buat prompt negatif.
ComfyUI Manager
ComfyUI-Manager
ComfyUI Manager adalah ekstensi yang memasang, memperbarui, dan memperbaiki paket node kustom serta model dari dalam antarmuka, menyelesaikan masalah node yang hilang di workflow yang diimpor, dan menyimpan snapshot pengaturanmu.
Save Image
ComfyUI core
Save Image menyimpan tensor IMAGE ke ComfyUI/output sebagai PNG, dengan seluruh alur kerja tertanam di metadata file supaya gambarnya bisa ditarik kembali ke ComfyUI untuk mengembalikan grafiknya.
VAE Decode
ComfyUI core
VAE Decode mengubah LATENT yang sudah diambil sampelnya menjadi IMAGE piksel dengan VAE; VAE Decode (Tiled) melakukan hal yang sama dalam bentuk ubin untuk gambar yang sangat besar.
Load Image
ComfyUI core
Load Image membaca gambar dari folder input ComfyUI (atau dari unggahan) dan menghasilkan tensor IMAGE plus MASK yang diambil dari saluran alfa, titik awal untuk img2img, inpainting, ControlNet, dan grafik IP-Adapter.
Load LoRA
ComfyUI core
Load LoRA (LoraLoader) menerapkan file LoRA ke MODEL dan CLIP dengan kekuatan yang terpisah, jadi gaya, karakter, atau konsep bisa ditambahkan ke checkpoint mana pun tanpa harus menggabungkannya.