Cara Menjalankan Ace-Step1.5 di Comfyui GPU modal.com (backup)

Cara Menjalankan Ace-Step1.5 di Comfyui GPU modal.com - halo pembaca, hari ini saya mau share cara menjalankan model ai Ace-Step1.5 dari ACE-Step Team.

Model Ai Ace-Step1.5 ini adalah model generative Ai text to audio (t2a), text to music (t2m) yakni simplenya model Ai ini bisa menghasilkan audio atau lagu dari prompt tags beserta lyric lagu nya.

Jika kalian sudah mengenal atau pernah mencoba membuat musik menggunkan suno ai atau udio ai, kalian bisa mencoba mennggunkan model Ai Ace-Step1.5 ini, karena model ini bersifat open source, open weight, serta commercial purposes (tujuan komersil).

output lagu yang dihasilkan juga bisa terbilang menarik dan bisa menyamai kualitas dari suno ai, sependengaran saya sebagai seorang awam yang cukup mengemari mendengarkan musik dan menghasilakan beat lagu di suno ai.

mungkin jika kemampuan crafting prompt kalian lebih jago dan ada kemampuan bermusik lebih advance kalian akan bisa menghasilkan beat lagu yang lebih menarik lagi.

Seperti artikel sebelum-sebelumnya dan sudah tertera di judul artikelnya, saya menjalankan model ini menggunkan web node comfyui yang di deploy di platform modal.com yang memberikan kredit bulanan yang bisa digunkan untuk menyewa GPU yang sampai dengan GPU Nvidia B200, karena saya tidak punya GPU di laptop saya :p

Sebelum lanjut ke step dibawah, silahkan kalian baca-baca cara mendeploy comfyui di modal.com pada artikel saya sebelumnya ini ya: Cara Menjalankan Comfyui di Modal.com

Cara Menjalankan Ace-Step1.5 di Comfyui GPU modal.com

• Tentu saja kalian perlu menginsatall kan atau mengupdate ComfyUI nya dulu ya ke versi baru agar support model Ai ini, sebagai keteranan saya menggunkan versi ComfyUI 0.14.1
• Kemudian kalian perlu mendownload dan memasukkan workflow berikut ini ke comfyui nya, klik file > open > cari audio_ace_step_1_5_turbo_aio.json yang sudah kalian download
• Jika mungkin ada pemberitahuan ada node yang belum terinstall di comfyui kalian, kalian tinggal menginstall kan missing node nya untuk ComfyUI-Manager versi baru biasanya jika ada node yang hilang (missing) akan ada perintah install nya saat menjalankan comfyui nya, kalian tinggal klik install lalu restart backend nya lalu reload tab browser comfyui nya.
• Pasangkan juga node ComfyUI Model Downloader yang akan kita gunakan adalah hf downloader nya untuk mendownload model dan lainnya, lalu restart comfyui setelah node ini terintall ya
• Selanjutnya adalah mendownload file weight model Ai nya ke comfyui. untungnya model ini sudah di pack jadi 1 file saja oleh Comfy-org jadi tidak perlu banyak bagaian file model lagi yang perlu di unduh
• kita buat workflow baru > klik Node Library > cari node HF Download dan masukkan ke dalam workflow barunya.
• Repo untuk mendownload file-file nya ada disini, saya menggunakan yang sudah di buat oleh Comfy-Org: https://huggingface.co/Comfy-Org/ace_step_1.5_ComfyUI_files
• Pertama kita download model ai nya, atur seperti ini, repo id: Comfy-Org/ace_step_1.5_ComfyUI_files, filename: checkpoints/ace_step_1.5_turbo_aio.safetensors, dan local_path: checkpoints kemudian klik Run
• Setelah file-file sudah selesai didownload kemudian reload browser untuk comfyui nya agar file yang sudah selesai di download dapat terbaca di workflownya
• muat ulang lagi workflow audio_ace_step_1_5_turbo_aio.json yang sudah kalian download di awal tadi, jika workflownya di tutup oleh comfyui
• Atur workflownya mengarah ke file yang sudah kalian download tadi ya.
• Masukkan prompt tags nya dan lyric lagu coba test generate audio Ai nya dengan klik Run
• Tunggu hingga selesai, saya dapat perkiraan waktunya 49.73 second (50 detik) untuk menghasilkan 1 lagu durasi 3 menit 20 detik menggunkan gpu a100-80GB.
• Selanjutnya tinggal kalian sesuaikan sendiri ya mau menghasilkan genre lagu seperti apa, dan lirik lagunya .
• Selesai.

Contoh output hasil nya :

Perhatikan hanya kualitas audionya ya, karena di blogger tidak bisa upload hanya mp3 jadi saya coba buat visual video agar bisa di embed di blog, dan sepertinya kualiatas bit rate audionya malah terkompres jadi 195kbps saja :p

Catatan :

• Pada tag kalian bisa isikan genre lagu, instrument, suasana, tempo, bpm dan gaya vokalis.
• pada lyrics, Gunakan tag seperti [verse], [chorus], [bridge] untuk memandu struktur lagu.
• jika sudah selesai menggunkan comfyui, saya sarankan untuk mematikan service agar menghemat credit kalian. Caranya: masuk ke dashboard modal.com > klik menu Logs > klik Stop now

Referensi artikel ini:

https://huggingface.co/ACE-Step/Ace-Step1.5

https://blog.comfy.org/p/ace-step-15-is-now-available-in-comfyui

Trimakasih kepada:

ACE-Step team untuk model ai yang bisa diakses publik secara gratis

Comfy untuk NodeUI open source dan workflow json nya

Modal.com untuk credit komputasi GPU nya