Adobe a présenté sa nouvelle expérience d'intelligence artificielle qui facilite la production musicale

Adobe a annoncé qu'il travaillait sur une nouvelle expérience d'intelligence artificielle pour simplifier le processus de production musicale et permettre aux utilisateurs de produire de la musique sans avoir besoin d'un logiciel d'édition audio professionnel. Présenté lors du Hot Pod Summit organisé à Brooklyn, ce nouvel outil prototype appelé « Project Music GenAI Control » permet aux utilisateurs de produire de la musique à l'aide de commandes texte, puis d'éditer ces fichiers audio.

Le rôle de l'intelligence artificielle dans la production musicale

Les utilisateurs commencent par saisir une description textuelle pour produire de la musique dans un style spécifique. Par exemple, ils peuvent déterminer le type de musique qu’ils souhaitent en faisant des définitions telles que « happy dance » ou « sad jazz ». Adobe note que les commandes d'édition intégrées permettent aux utilisateurs de personnaliser ces résultats, en ajustant les motifs répétitifs, le tempo, l'intensité et la structure. Les sections musicales peuvent être réorganisées et une musique de fond ou des fichiers audio en boucle peuvent être produits pour les besoins de création de contenu.

D'un autre côté, Adobe affirme que l'outil peut ajuster l'audio produit « sur la base d'une mélodie de référence », ce qui rend la durée des clips audio suffisamment longue pour des besoins tels qu'une animation fixe ou des épisodes de podcast. L'interface utilisateur réelle qui sera utilisée pour éditer l'audio produit n'a pas encore été révélée, nous devons donc faire preuve d'imagination pour le moment.

Adobe a déclaré avoir chargé du contenu du domaine public pour la version de démonstration publique de Project Music GenAI Control, mais n'a pas précisé si l'outil offrirait la possibilité de charger directement des fichiers audio comme matériel de référence ou combien de temps les clips pourraient être prolongés. Nous avons demandé des éclaircissements à Adobe à ce sujet et mettrons à jour les nouvelles dès que nous aurons une réponse.

Bien que des outils similaires tels que MusicLM de Google et AudioCraft open source de Meta existent déjà ou sont en cours de développement, ces outils permettent aux utilisateurs de produire de l'audio avec des commandes de texte mais ont une prise en charge très limitée, voire inexistante, pour l'édition de la sortie musicale. Cela signifie que vous devrez reproduire l'audio ou effectuer des modifications vous-même jusqu'à ce que vous obteniez les résultats souhaités.

« L'un des aspects les plus intéressants de ces nouveaux outils est qu'ils ne servent pas uniquement à produire de l'audio », a déclaré Nicholas Bryan, chercheur scientifique principal chez Adobe Research. « Ils les amènent au niveau de Photoshop, donnant aux créateurs le même contrôle approfondi sur la mise en forme, le réglage et l'édition de leur musique. « Cela signifie un contrôle au niveau des pixels pour la musique. »

Project Music GenAI est développé en collaboration avec l’Université de Californie et la Carnegie Mellon University School of Computer Science. Adobe explique qu'il s'agit d'une expérience « à un stade précoce », et que l'intégration de ces fonctionnalités dans les outils d'édition existants de l'entreprise, tels qu'Audition et Premiere Pro, peut prendre un certain temps. Le véhicule n'est pas encore disponible au public et aucune date de sortie n'a été annoncée. Vous pouvez suivre le développement de Project Music GenAI, ainsi que d’autres expériences sur lesquelles Adobe travaille, sur le site Web d’Adobe Labs.