Nvidia présente son éditeur de musique assisté par IA, Fugatto, capable de générer des sons inédits, comme une trompette qui miaule. Cet outil crée de la musique, des effets sonores et de la parole à partir de textes et d'audio qu'il n'a pas spécifiquement été formé à utiliser. Comme démontré dans la vidéo ci-dessous, Fugatto peut composer de la musique à partir de requêtes inhabituelles comme "Créer un saxophone hurlant, aboyant, puis de la musique électronique avec des chiens qui aboient. " Nvidia montre des exemples où Fugatto produit des effets sonores uniques, tels que "Des pulsations de basses profondes et grondantes associées à des pépiements numériques aigus et intermittents, comme le son d'une machine massive et consciente qui se réveille. " Il transforme même les sons de la voix en changeant les accents ou les tons pour les rendre colériques ou calmes. Pour l'édition musicale, Fugatto peut isoler les voix, ajouter des instruments et remplacer un piano par un chanteur d'opéra pour modifier les mélodies. Un article accompagnant l'annonce énumère les vastes ensembles de données utilisés pour former Fugatto, y compris les effets sonores de la BBC. Bien que plusieurs outils audio d'IA existent, comme ceux de Stability AI, OpenAI, Google DeepMind, ElevenLabs et Adobe, aucun ne prétend créer des sons entièrement nouveaux.

Certaines startups d'IA font même face à des poursuites pour violation de droits d'auteur sur des outils similaires, et un rapport a noté que Nvidia et d'autres ont utilisé les sous-titres de YouTube pour former leurs modèles d'IA. Pour développer Fugatto, Nvidia a compilé un ensemble de données de millions d'échantillons audio. Ils ont également formulé des instructions pour élargir les capacités de tâches du modèle, améliorant ainsi la précision et permettant de nouvelles tâches sans données supplémentaires. Nvidia n’a pas encore annoncé la date de sortie publique de l’outil.