Google DeepMind présente le modèle de génération musicale Lyria 2

• DeepMind ajoute de nouvelles fonctionnalités à Music AI Sandbox, dévoilé en 2023, et l’ouvre à davantage d’utilisateurs (États-Unis)
• Le modèle Lyria 2 permet une génération musicale de haute qualité, et Lyria RealTime une création musicale interactive en temps réel
• Les fonctions Create, Extend, Edit prennent en charge la génération, l’extension et l’édition de musique avec l’aide de l’IA
• Lyria RealTime permet de créer, jouer et contrôler de la musique en temps réel, avec la possibilité de mixer librement genres et styles
• Toute musique générée intègre un filigrane grâce à la technologie de watermarking SynthID

---

Présentation de Music AI Sandbox

• Music AI Sandbox est un ensemble d’outils expérimental développé en étroite collaboration avec des musiciens
• Il ouvre de nouvelles possibilités créatives, qu’il s’agisse de générer des idées de nouveaux instruments, de créer des arrangements vocaux ou de surmonter les blocages créatifs
• Il aide à expérimenter différents genres, à explorer des paysages sonores et à développer de nouveaux styles musicaux

Fonctionnalités principales

• Create

  • Si l’on décrit le son souhaité (genre, ambiance, style vocal, instruments, etc.), l’IA génère différents échantillons musicaux
  • Il est possible de créer un morceau en saisissant des paroles et en définissant des caractéristiques musicales comme le tempo ou la tonalité

• Extend

  • Cette fonction permet de téléverser ou de générer un clip audio, puis de laisser l’IA en créer la suite
  • Elle aide à développer une idée, à réimaginer un travail en cours et à dépasser les interruptions dans la composition

• Edit

  • Il est possible de transformer l’ambiance, le genre ou le style d’un clip audio, ou d’ajuster finement certaines parties seulement
  • On peut effectuer des transformations via des prompts textuels ou utiliser des préréglages pour faire des transitions, des fondus et insérer des passages de transition

Lyria 2 et Lyria RealTime

• Lyria 2 est un modèle de génération musicale haute fidélité capable de saisir des nuances fines, même dans des genres variés et des compositions complexes
• Lyria RealTime permet de créer, jouer et contrôler de la musique en temps réel, avec la possibilité de mixer librement genres et styles
• Tous les audios générés sont filigranés via la technologie SynthID, afin de garantir une génération responsable

Une IA conçue avec les créateurs

• Music AI Sandbox a été développé directement avec des musiciens pour créer de la confiance et proposer des outils au service de la création
• Les outils sont continuellement améliorés à partir des retours des artistes, et d’autres mises à jour sont prévues cette année
• DeepMind cherche à faire participer davantage de musiciens, auteurs-compositeurs et producteurs, avec possibilité de s’inscrire comme bêta-testeur

[GN⁺]

Commentaires Hacker News

• Le plus gros problème avec le fait de pousser l’IA partout, c’est qu’on va dans la mauvaise direction

  • Au lieu que l’IA remplace l’art et l’écriture, j’aimerais qu’elle fasse la lessive et la vaisselle pour que je puisse faire de l’art et écrire

• Le fait que l’IA compose de la musique me rappelle une phrase de David Bowie

  • « La musique elle-même deviendra comme l’eau ou l’électricité. Profitez de ces dernières années, car une chose pareille ne se reproduira plus »
  • Avec la musique générée par l’IA, son idée que « la musique sera comme l’eau ou l’électricité » pourrait devenir réalité

• Les débats philosophiques sur l’art sont souvent superficiels

  • Il s’agit du débat sur la question de savoir si la valeur d’une œuvre d’art est créée dans l’esprit de l’artiste ou dans celui du consommateur
  • La plupart des gens pensent que la vérité se situe quelque part entre les deux, dans l’harmonie entre la pensée du créateur et celle du public
  • Les débats en ligne ignorent cette dichotomie, ce qui en dégrade la qualité

• L’intérêt pour la génération musicale par IA semble plus faible que prévu

  • Les modèles d’IA retirent le plaisir de la production musicale physique
  • Les chansons générées par IA manquent de sens et de nouveauté
  • La génération d’images IA et de courtes vidéos peut susciter un effet de nouveauté et de l’intérêt
  • On voudrait que l’IA fusionne la réalité et la fantasy, mais cela n’est pas encore proposé

• Utilisation de Suno pour produire de la musique sur des thèmes précis

  • Il est facile de générer des diss tracks avec Suno
  • L’interface est limitée et davantage d’innovation est nécessaire
  • L’outil idéal serait capable de générer ce qu’on veut si on lui décrit l’ambiance ou le ressenti recherché

• La musique IA me permet de faire des choses que je ne pouvais pas faire auparavant

  • Dans mon groupe de DnD, je crée des chansons sur les personnages, les moments amusants et les histoires de fond
  • C’est un excellent outil pour renforcer l’implication dans le jeu

• Les outils de musique générée par IA vont entraîner une surabondance de musique de mauvaise qualité

  • Ils vont submerger les personnes qui font de la musique honnêtement
  • D’autres métiers et compétences traversent aussi une crise existentielle similaire

• Lyria 2 n’est accessible qu’à un nombre limité de testeurs de confiance

• Le problème des entreprises et des produits d’IA, c’est qu’ils surestiment le contenu lui-même

  • Ce qui a de la valeur, ce n’est pas le contenu, mais les personnes qui le créent, ainsi que la communauté et la culture qui l’entourent
  • Même si l’IA peut produire davantage, plus vite et à moindre coût, sans facteurs extérieurs cela n’a pas de valeur
  • Même si le prix ou l’effort du contenu tombe à $0, le contenu en lui-même n’a pas de valeur intrinsèque