Création musicale basée sur l'IA avec ACE Step
Les modèles musicaux basés sur l'IA ont évolué rapidement, mais en réalité en les utilisant a été une autre histoire. Jusqu'à récemment, les créateurs devaient :
- Installation manuelle Interface utilisateur confortable et recherchez des poids de modèles compatibles.
- Configuration complexe graphes de nœuds juste pour exécuter un flux de travail simple.
- Difficulté à trouver des pièces manquantes, par exemple si vous voulez remixer des voix mais ne pas trouver de nœud.
- Passez plus de temps sur configuration technique plutôt que de faire de la musique.
Pour les artistes et les producteurs, cet obstacle technique signifiait que moins de personnes pouvaient expérimenter les dernières avancées en matière d'IA.
CosyFlows dans Promptus
Promptus CosyFlows change la donne. Il intègre des flux de travail ComfyUI complexes dans modèles en un clic vous pouvez l'ouvrir directement dans le Toile confortable à l'intérieur de Promptus.
Aucune installation. Pas de nœuds de câblage. Pas de chasse aux modèles.
Il vous suffit de sélectionner un flux et de commencer à créer.
L'un des exemples les plus remarquables est le suivant :
👉 Édition M2M (cosy) ACE Step v1
Ce CosyFlow regroupe les Modèle de fondation musicale Ace-Step v1 dans un flux de travail qui prend en charge trois méthodes puissantes pour créer et modifier de la musique.
Qu'est-ce qu'Ace-Step ?
Avant de plonger dans le flux de travail, voici un bref historique :
- Un pas en avant est un modèle de fondation musicale open source, construit par ACE Studio et StepFun.
- Il est concédé sous licence Apache-2.0 → gratuit à la fois pour la recherche et pour un usage commercial.
- Techniquement, il utilise un générateur basé sur la diffusion, un autoencodeur à compression DCAE et un transformateur linéaire.
- Performances : génère jusqu'à 4 minutes de musique en 20 secondes sur un GPU NVIDIA A100.
- Supports paroles + instructions de style, la génération multilingue et l'édition de fichiers audio existants.
En d'autres termes, il est conçu pour vitesse, qualité et contrôlabilité , ce qui le rend idéal pour les flux de travail créatifs.
Comment fonctionne le CosyFlow dans Promptus
Lorsque vous lancez Édition M2M (cosy) ACE Step v1 dans Promptus Playground, vous entrez dans un flux de travail ComfyUI déjà préchargé avec tous les nœuds nécessaires :
- Chargeur de modèles Ace-Step → Charge les poids du modèle préentraînés.
- Lyrics Node → Vous permet d'écrire ou de modifier des paroles structurées, en 19 langues.
- Nœud de balises → Contrôle le style, les instruments, le tempo et le genre.
- Branche d'édition M2M → Vous permet de saisir le son existant pour le transformer.
- Nœuds de sortie → Prévisualisez directement l'audio, puis enregistrez/exportez.
Pas de câblage. Aucun nœud manquant. Juste des contributions créatives.
Comment générer de la musique avec ce flux de travail
1. Synthèse audio (à partir de zéro)
Commencez par des instructions textuelles uniquement :
- Balises décrivez le style et l'instrumentation.
- Paroles définir la ligne vocale.
🔹 Exemple:
- Étiquettes :
« dream pop, synthés éthérés, batterie douce, 100 bpm » - Paroles :
[couplet]
Dans la lueur d'une lumière qui s'estompe
Je trouve les étoiles, je sens la nuit
[chœur]
Porte-moi là où le silence chante
Dans le ciel sur des ailes argentées
Le modèle génère une piste audio complète avec voix, mélodie et accompagnement.
2. Audio vers audio (remixage et montage)
Téléchargez une chanson ou un clip audio existant, puis guidez le modèle avec de nouvelles balises et de nouvelles paroles.
🔹 Exemple:
- Entrée : une chanson pop entraînante.
- Étiquettes :
« ondes synthétiques sombres, basses pulsantes, sensation cinématographique » - Paroles :
« Les ombres s'élèvent, les néons brillent, le temps passe entre mes mains »
La sortie préserve le rythme/la mélodie de l'original, mais transforme le style et les voix.
3. Édition M2M (transformation de machine à machine)
C'est la puissance « d'édition » du CosyFlow : prenez du son généré par le modèle ou un son externe et appliquez-le transformations directes de machine à machine.
Cas d'utilisation :
- Changer le nom d'une chanson langue tout en gardant la mélodie.
- Échange genre mais garde le chant.
- Prolongez la durée de la musique au-delà de sa durée d'origine.
🔹 Exemple:
- Entrée : un enregistrement acoustique folk.
- Étiquettes :
« guitare flamenca, rythme espagnol, claps vifs » - Paroles :
[es]
Chanter sous la lune
Le rythme vit dans mon cœur
Le modèle produit la même structure de chanson, mais avec des voix espagnoles et une instrumentation flamenco.
Flux de travail visuel
Cela montre comment les trois modes de génération entrent dans le même étage de sortie.
Pourquoi c'est important
- Problème: Les flux de travail ComfyUI traditionnels étaient trop techniques, difficiles à configurer et fragmentés.
- Solution: Promptus CosyFlow regroupe ACE-Step dans un toile ComfyUI prête à l'emploi, en abaissant les obstacles afin que les créateurs puissent se concentrer sur l'art et non sur l'ingénierie.
En proposant trois manières de générer — à partir de texte, d'audio ou via l'édition M2M — le flux de travail couvre l'éventail complet des besoins créatifs : de la composition à zéro au remixage en passant par le montage transformateur.
✅ En bref :
« Édition M2M (confortable) ACE Step v1 » est un terrain de jeu créatif prêt à l'emploi à l'intérieur de Promptus. Il utilise l'un des modèles de musique open source les plus avancés (ACE-Step) et le rend utilisable pour musiciens, producteurs et amateurs sans les problèmes de configuration.
