Cara Menjalankan LTX-2 di Comfyui GPU Modal.com (backup)

Cara Menjalankan LTX-2 di Comfyui GPU Modal.com - Halo pembaca, hari ini saya mau share tutorial tentang cara menjalankan model Ai LTX-2 di comfyui menggunkan GPU modal.com

LTX-2 adalah model Ai video generation yang di buat oleh lightricks yang memiliki paramater 19b (19 miliar), sepengetahuan saya sebelumnya lightricks pernah juga merelease model video generation sebelumnya yakni LTX-Video. Mungkin LTX-2 ini adalah model Ai selanjutnya dari yang sebelumnnya ini :d

LTX-2 sudah bisa menghasilkan video sekaligus sync dengan audio nya, dengan hasil yang baik dari segi video tapi audio saya masih sering mengalami noise yang masih cukup mengganggu di telinga.

Model LTX-2 ini juga di opensource kan oleh lightricks di huggingface, jadi untuk yang suka mencoba dan mengoprek model Ai video gen. Model ini bisa kalian coba untuk dapat menghasilkan video sesuai prompt t2v (text to video).

Tapi untuk model gen video tantu saja akan memakan resource memory vram yang cukup masif karena video yang dihasilkan sendiri merupakan kumpulan frame gambar yang disusun dalam urutan waktu sehingga nampak bergerak.

Namun kemarin saya mencoba dengan workflow yang katanya (low vram) yang dibagikan oleh user RuneXX di huggingface, setelah saya mencoba memang cukup cepat proses pembuatan video sekitar 151.93s (152 detik) diawal untuk menghasilkan video 10 detik resolusi 1280x768. Walaupun saya belum bisa melihat penggunaan vram nya saat proses karena node ComfyUI-Crystools mengalami conflict dan tidak bisa di install di comfyui nya.

Seperti artikel saya sebelum-sebelumnya terkait inferensi model-model Ai ini, saya akan menggunkan layanan dari modal.com yang memberikan kredit bulanan yang bisa digunkan untuk menyewa GPU yang sampai dengan GPU Nvidia B200. Karena saya tidak punya GPU di laptop saya.

Saya juga menjalankan model Ai ini menggunkan bantuan dari comfyui sebagai web ui nya, karena comfyui sudah support menjalankan model LTX-2 ini di update terbarunya. sebelum lanjut ke step dibawah, silahkan kalian baca-baca cara install comfyui di modal.com pada artikel saya sebelumnya ini: Cara Menjalankan Comfyui di Modal.com

Cara Menjalankan LTX-2 di Comfyui GPU Modal.com

• Tentu saja kalian perlu menginsatall kan atau mengupdate ComfyUI nya dulu ya ke versi baru agar support model ai ini.
• Kemudian kalian perlu mendownload dan memasukkan workflow berikut ini ke comfyui nya, klik file > open > cari LTX-2_T2V_Basic_(low_vram)_edited.json yang sudah kalian download tadi
• Mungkin akan ada pemberitahuan jika ada node yang belum terinstall di comfyui kalian, kalian tinggal menginstall kan missing node nya di comfyui manager terbaru biasanya akan tampil di awal jika ada custom node yang belum terpasang atau melalui Comfyui menu > Manage Extensions > Missing > lalu install node yang belum terinstall dan reload tab browser comfyui nya jika diminta saat sudah selesai.
• Pasangkan juga node ComfyUI Model Downloader yang akan kita gunakan hf downloader nya untuk mendownload model dan file lainnya, lalu restart comfyui nya
• Selanjutnya adalah mendownload file weight (bobot) model ai nya, 2 file Text encoder, dan VAE video, VAE audio, laten upscale nya ke comfyui. kita buat workflow baru > klik Node Library > cari node HF Download dan masukkan ke dalam workflow barunya.
• Repo untuk mendownload file-file nya ada di beberapa repo ini: https://huggingface.co/Kijai/LTXV2_comfy, https://huggingface.co/unsloth/gemma-3-12b-it-GGUF, https://huggingface.co/Lightricks/LTX-2
• Pertama kita download model ai nya, ini url repo hf untuk model ai: https://huggingface.co/Kijai/LTXV2_comfy
• Atur seperti ini, repo id: Kijai/LTXV2_comfy, filename: diffusion_models/ltx-2-19b-distilled_Q4_K_M.gguf, dan local_path: unet kemudian klik Run
• kemudian kita download text_encoders 1 nya, pertama menggunakan ltx-2-19b-embeddings_connector_distill_bf16.safetensors reponya masih sama
• Atur seperti ini, repo id: Kijai/LTXV2_comfy, filename: text_encoders/ltx-2-19b-embeddings_connector_distill_bf16.safetensors, dan local_path: text_encoders kemudian klik Run
• Lalu download VAE audionya nya dulu yang reponya masih sama
• Atur seperti ini, repo id: Kijai/LTXV2_comfy, filename: VAE/LTX2_audio_vae_bf16.safetensors, dan local_path: vae kemudian klik Run
• Lalu download VAE videonya nya reponya masih sama
• Atur seperti ini, repo id: Kijai/LTXV2_comfy, filename: VAE/LTX2_video_vae_bf16.safetensors, dan local_path: vae kemudian klik Run
• Lalu download text_encoder 2 nya, yakni gemma-3-12b-it-Q2_K.gguf reponya: https://huggingface.co/unsloth/gemma-3-12b-it-GGUF
• Atur seperti ini, repo id: unsloth/gemma-3-12b-it-GGUF, filename: gemma-3-12b-it-Q2_K.gguf, dan local_path: text_encoders kemudian klik Run
• Terakhir kita download laten upscale ltx-2-spatial-upscaler-x2-1.0.safetensors nya, ini reponya: https://huggingface.co/Lightricks/LTX-2
• Atur seperti ini, repo id: Lightricks/LTX-2, filename: ltx-2-spatial-upscaler-x2-1.0.safetensors, dan local_path: latent_upscale_models kemudian klik Run
• Setelah file-file sudah selselai didownload kemudian reload browser untuk comfyui nya agar file yang sudah selesai di download dapat terbaca di workflownya
• buka ulang lagi workflow LTX-2_T2V_Basic_(low_vram)_edited.json yang sudah kalian download di awal tadi, jika workflow nya di tutup oleh comfyui
• Atur workflownya mengarah ke file-file yang sudah kalian download tadi.
• Masukkan prompt text nya dan coba test generate video Ai nya dengan klik Run
• Tunggu hingga proses generate video audio nya selesai.

Output Hasil:

Catatan :

• Saya sempat mengalami error unknow gemma3 architectire, ternyata ada custom node yang belum terupdate sehingga gemma3 tidak terbaca. jadi tinggal update saja custom node nya di Manage Extensions > Update Available > update all

Referensi artikel ini:

• https://huggingface.co/Lightricks/LTX-2
• https://docs.comfy.org/tutorials/video/ltx/ltx-2
• https://huggingface.co/Kijai/LTXV2_comfy
• https://huggingface.co/unsloth/gemma-3-12b-it-GGUF
• https://huggingface.co/RuneXX/LTX-2-Workflows
• https://blog.comfy.org/p/ltx-2-open-source-audio-video-ai

Trimakasih kepada:

Lightricks untuk model ai yang bisa diakses publik secara gratis

Kijai untuk custom node, dan file tambahan nya

unsloth untuk file gguf nya

RuneXX untuk workflow nya

Comfy untuk NodeUI open source nya

Modal.com untuk credit komputasi GPU nya