Meta publie en open source l’IA générative pour l’audio « AudioCraft »

 (ai.meta.com)
16 points par xguru 2023-08-03 | 2 commentaires | Partager sur WhatsApp
  • Une IA générative capable de produire de l’audio et de la musique de haute qualité à partir d’entrées textuelles utilisateur
  • Composée de MusicGen + AudioGen + du décodeur EnCodec, qui prennent respectivement en charge la génération musicale, la génération audio et la compression audio
  • Peut être utilisée à des fins de recherche et pour aider le public à mieux comprendre la technologie
  • Permet à des musiciens professionnels de composer de nouveaux morceaux sans jouer la moindre note sur un instrument, ou à des développeurs de jeux indépendants de créer à faible coût des effets sonores réalistes et des bruits de fond

À lire aussi

2 commentaires

 
ticonweb 2023-08-03

Je ne sais pas si ce sera possible avec ce qui a été publié en open source, mais si on pouvait l’intégrer dans un logiciel de Digital Audio Workstation sous forme de pistes par instrument, ce serait vraiment extrêmement utile.

Merci pour l’info
 
GN⁺ 2023-08-03
Avis Hacker News
  • Les modèles d’IA générative comme AudioCraft, utilisés dans la publicité, facilitent les tests A/B et réduisent le besoin de personnel créatif.
  • Meta se distingue d’OpenAI en soulignant qu’elle utilise des données sous licence et n’emploie pas de données non rémunérées.
  • La licence CC-BY-NC utilisée par AudioCraft n’est pas considérée comme une licence open source selon la définition de l’open source.
  • On craint qu’avec le déferlement de contenus générés par l’IA, le passé disparaisse et qu’il devienne difficile de distinguer les vraies informations des fausses.
  • Certains spéculent sur la capacité à générer de la musique à partir de bibliothèques musicales existantes.
  • Certaines personnes estiment que permettre aux détenteurs de droits d’auteur de contrôler les données d’entrée des modèles d’IA pourrait mener à une société de « crime par la pensée ».
  • La raison pour laquelle Meta a choisi de mettre ces modèles en open source n’est pas claire.
  • Certains utilisateurs ont du mal à trouver de la documentation sur l’installation et l’utilisation des modèles.
  • La différence de qualité audio entre le MBD d’AudioCraft et les variantes d’EnCodec est perceptible.
  • Un commentateur suggère que Spotify pourrait utiliser des modèles d’IA générative comme AudioCraft pour créer sa propre musique et réduire sa dépendance aux labels afin d’améliorer sa rentabilité.