Avec NSynth, Google demande à son IA de créer des sons entièrement inédits

Avec NSynth, Google demande à son IA de créer des sons entièrement inédits

photo de profil

Par Thibault Prévost

Publié le

À chaque instrument son “vecteur”

Pour ce faire, le réseau neuronal dissèque les sons le plus précisément possible, transformant un sample audio en un assemblage de données mathématiques – de la même manière qu’un logiciel transformant de l’audio en MIDI, mais en beaucoup plus puissant. Une fois l’opération effectuée, l’IA attribue à chaque instrument un “vecteur” mathématique, que la machine peut utiliser pour reproduire sa sonorité… ou en combiner plusieurs et générer un nouveau vecteur, entièrement original, composé de “l’espace” déniché entre deux, trois, quatre sons parfois totalement différents.
Pour faire profiter de son outil à tous ceux qui le souhaitent, Google a publié ses algorithmes dans un papier arXiv, rendu sa base de données de sons téléchargeable et monté une petite plateforme pour écouter les résultats de ses tripatouillages sonores. Bon, on ne va pas se mentir, ce n’est toujours pas du Dre, mais à force de bosser à cette vitesse, les équipes du Google Brain Project vont bien finir par permettre à des êtres mathématiques de nous sortir des tubes. Entre-temps, les producteurs amateurs seraient avisés de garder un œil sur l’évolution de cette banque de nouveaux instruments – difficile de faire plus classe pour sa prod que d’utiliser un sample qui n’existe pas, non ?

À voir aussi sur Konbini