Cara Menjalankan LTX-2.3 di Comfyui GPU Modal.com (backup)

Cara Menjalankan LTX-2.3 di Comfyui GPU Modal.com - Halo pembaca, hari ini saya mau share tutorial tentang cara menjalankan model Ai LTX-2.3 di comfyui menggunkan GPU modal.com

Model ini adalah model Ai audio video generation versi update terbaru dari lightricks yang sebelumnya juga sudah membuat dan membagikan versi sebelumnya yakni LTX-2.

LTX-2.3 ini juga sudah bisa menghasilkan video sekaligus sync dengan audio nya, dengan hasil yang baik dari segi video tapi audio saya masih sering mengalami noise yang masih cukup kurang enak di telinga.

Model gen video tantu saja akan memakan resource memory vram yang cukup masif karena video yang dihasilkan sendiri merupakan kumpulan frame gambar yang disusun dalam urutan waktu sehingga nampak bergerak.

Sebagai gambaran testing yang saya lakukan saya menggunkan GPU A100-80GB dari modal.com, karena model ai nya sendiri secara ukuran sudah cukup big size yakni 46.1 GB untuk yang precision BF16 dan ukuran sekitar setengah nya untuk yang FP8.

Seperti artikel saya sebelum-sebelumnya terkait inferensi model-model Ai ini, saya akan menggunkan layanan dari modal.com yang memberikan kredit bulanan yang bisa digunkan untuk menyewa GPU yang sampai dengan GPU Nvidia B200. Karena saya tidak punya GPU di laptop saya.

Saya juga menjalankan model Ai ini menggunkan bantuan dari comfyui sebagai web node ui nya, karena comfyui sudah support menjalankan model LTX-2.3 ini di update terbarunya. sebelum lanjut ke step dibawah, silahkan kalian baca-baca cara install comfyui di modal.com pada artikel saya sebelumnya ini: Cara Menjalankan Comfyui di Modal.com

Cara Menjalankan LTX-2.3 di Comfyui GPU Modal.com

• Tentu saja kalian perlu menginsatall kan atau mengupdate ComfyUI nya dulu ya ke versi baru agar support model ai ini.
• Kemudian kalian perlu mendownload dan memasukkan workflow berikut ini ke comfyui nya, klik file > open > cari video_ltx2_3_t2v.json yang sudah kalian download tadi
• Mungkin akan ada pemberitahuan jika ada node yang belum terinstall di comfyui kalian, kalian tinggal menginstall kan missing node nya di comfyui manager terbaru biasanya akan tampil di awal jika ada custom node yang belum terpasang atau melalui Comfyui menu > Manage Extensions > Missing > lalu install node yang belum terinstall dan reload tab browser comfyui nya jika diminta saat sudah selesai.
• Pasangkan juga node ComfyUI Model Downloader yang akan kita gunakan hf downloader nya untuk mendownload model dan file lainnya, lalu restart comfyui nya
• Selanjutnya adalah mendownload file weight (bobot) model ai nya, Text encoder, dan 2 Lora, dan laten upscale nya ke comfyui. kita buat workflow baru > klik Node Library > cari node HF Download dan masukkan ke dalam workflow barunya.
• Repo untuk mendownload file-file nya ada di beberapa repo ini: https://huggingface.co/Lightricks/LTX-2.3-fp8, https://huggingface.co/Lightricks/LTX-2.3, https://huggingface.co/Comfy-Org/ltx-2
• Pertama kita download model ai nya, ini url repo hf untuk model ai: https://huggingface.co/Lightricks/LTX-2.3-fp8
• Atur seperti ini, repo id: Lightricks/LTX-2.3-fp8, filename: ltx-2.3-22b-dev-fp8.safetensors, dan local_path: checkpoints kemudian klik Run
• kemudian kita download text_encoders nya, pertama menggunakan gemma_3_12B_it_fp4_mixed.safetensors reponya: https://huggingface.co/Comfy-Org/ltx-2
• Atur seperti ini, repo id: Comfy-Org/ltx-2, filename: split_files/text_encoders/gemma_3_12B_it_fp4_mixed.safetensors, dan local_path: text_encoders kemudian klik Run
• Lalu download lora 1 nya dulu yakni gemma-3-12b-it-abliterated_lora_rank64_bf16.safetensors yang reponya masih sama https://huggingface.co/Comfy-Org/ltx-2
• Atur seperti ini, repo id: Comfy-Org/ltx-2, filename: split_files/loras/gemma-3-12b-it-abliterated_lora_rank64_bf16.safetensors, dan local_path: loras kemudian klik Run
• Lalu download lora 2 nya nya reponya: https://huggingface.co/Lightricks/LTX-2.3
• Atur seperti ini, repo id: Lightricks/LTX-2.3, filename: ltx-2.3-22b-distilled-lora-384.safetensors, dan local_path: loras kemudian klik Run
• Terakhir kita download laten upscale nya, reponya masih sama: https://huggingface.co/Lightricks/LTX-2.3
• Atur seperti ini, repo id: Lightricks/LTX-2.3, filename: ltx-2.3-spatial-upscaler-x2-1.0.safetensors, dan local_path: latent_upscale_models kemudian klik Run
• Setelah file-file sudah selselai didownload kemudian reload browser untuk comfyui nya agar file yang sudah selesai di download dapat terbaca di workflownya
• buka ulang lagi workflow video_ltx2_3_t2v.json yang sudah kalian download di awal tadi, jika workflow nya di tutup oleh comfyui
• Atur workflownya mengarah ke file-file yang sudah kalian download tadi.
• Masukkan prompt text nya dan coba test generate video Ai nya dengan klik Run
• Tunggu hingga proses generate video audio nya selesai.

Output Hasil:

Catatan :

• Workflow kali ini juga bisa dugunkan untuk memasukkan first frame image yang jika ingin kalian gunakan tinggal matikan switch disable_i2v (disable image to video).
• jika sudah selesai menggunkan comfyui, saya sarankan untuk mematikan service agar menghemat credit kalian. Caranya: masuk ke dashboard modal.com > klik menu Logs > klik Stop now

Referensi artikel ini:

• https://huggingface.co/Lightricks/LTX-2.3
• https://blog.comfy.org/p/ltx-23-day-0-supporte-in-comfyui

Trimakasih kepada:

Lightricks untuk model ai yang bisa diakses publik secara gratis

Comfy untuk NodeUI open source nya

Modal.com untuk credit komputasi GPU nya