Cette IA crée des chansons entières avec la musique, les paroles et le chant

0
201


OpenAI a présenté aujourd’hui le « Jukebox », un système d’IA open-source pour générer de la musique originale avec des paroles et des voix. En bref, c’est l’IA d’écriture musicale la plus impressionnante que nous ayons jamais vue.

Le Jukebox a été formé à partir d’importants ensembles de données musicales dans presque tous les genres, afin de pouvoir créer des chansons totalement nouvelles qui, dans de nombreux cas, ressemblent beaucoup à l’artiste ou aux artistes sur lesquels il a été formé.

Tout comme d’autres réseaux apprennent à transférer le style d’une peinture ou d’une autre œuvre d’art d’une image à l’autre, le Jukebox trouve le moyen d’imiter le style et le genre de la musique. Il tente également de recréer le style lyrique et le style de chant de chanteurs spécifiques.

Selon le document de recherche de l’équipe OpenAI :

Nous montrons que nos modèles peuvent produire des chansons de genres musicaux très divers comme le rock, le hip-hop et le jazz. Ils peuvent saisir la mélodie, le rythme, la composition à long terme et les timbres pour une grande variété d’instruments, ainsi que les styles et les voix des chanteurs à produire avec la musique.

Plutôt que de le décrire plus en détail, il vous suffit de l’entendre par vous-même :

OpenAI travaille depuis quelques années sur la production de musique. Son précédent projet, MuseNet, a effectivement produit des pistes MIDI (sonorités et compositions de base), mais à notre connaissance, il n’existe rien qui permette de créer des chansons avec des parties vocales complètes dans presque tous les genres comme le Jukebox.

Les candidatures pour le Jukebox sont pour l’instant essentiellement académiques. A moins qu’il n’y ait une catégorie pour les « pseudo-songs bizarres, générées par des machines », nous n’entendrons pas de sitôt les titres du Jukebox dans les hit-parades. Il lui manque la prouesse de suivre la structure de base de la musique. Vous remarquerez qu’il n’y a pas d’accroches répétitives ni de ponts lyriques.

Mais nous avons déjà vu ce genre de déploiement avec OpenAI. Ils proposent un cas d’utilisation assez intéressant, puis, au fil du temps, ils renforcent les modèles en augmentant les paramètres. En ce moment, le Jukebox fait une imitation impressionnante de quelqu’un qui marmonne une imitation d’artiste assez décente (sérieusement, les IA Elvis et Sinatra sont parfaites). Mais peut-être que les futures itérations apporteront de nouveaux morceaux qui ne pourront pas être distingués du travail réel des artistes.

Malheureusement, le Jukebox ne peut pas encore générer de nouvelles musiques. Il faut environ neuf heures pour rendre une seule minute de musique avec lui actuellement, ce qui met hors de portée pour l’instant toute utilisation interactive à grande échelle.

Heureusement, OpenAI s’est donné la peine de créer un navigateur que vous pouvez utiliser pour passer au crible des dizaines et des dizaines d’échantillons de chansons dont la musique correspond au style de chacun, de Michael Jackson et Céline Dion à Aesop Rock et NoFX (criez au concepteur d’OpenAI qui a un goût prononcé pour la musique).

Il suffit de pointer votre navigateur ici pour voir les chansons. Pour plus d’informations, consultez le document de recherche sur le Jukebox ici et le billet de blog d’OpenAI ici.

Publié le 30 avril 2020 – 21:35 UTC