Weird A.I. Yankovic : une plongée maudite dans le monde du clonage vocal

• L’article évoque l’utilisation du clonage vocal par IA pour recréer des chansons originales de Weird Al Yankovic comme si elles étaient reprises par d’autres artistes.
• L’auteur a mené une expérience consistant à faire reprendre la chanson de Weird Al "Eat It" avec la voix de Michael Jackson, en l’ajustant à la hauteur tonale d’origine.
• L’auteur a également essayé d’utiliser des modèles vocaux d’IA d’autres artistes, mais la voix et la prononciation si particulières de Weird Al ont rendu difficile le remplacement crédible de son chant.
• La communauté des reprises de chansons par IA s’organise autour d’un serveur Discord appelé A.I. Hub, où les membres partagent des astuces, des techniques et les modèles vocaux qu’ils ont entraînés.
• Les modèles vocaux sont hébergés sur Hugging Face, une startup d’IA qui a levé 235 millions de dollars lors d’une série D en août, pour une valorisation de 4,5 milliards de dollars.
• La Recording Industry Association of America (RIAA) a ciblé A.I. Hub pour avoir mis en ligne des chansons protégées par le droit d’auteur utilisées pour entraîner des modèles vocaux, mais n’a pris aucune mesure contre les modèles d’IA eux-mêmes.
• L’auteur a aussi expérimenté des reprises de chansons de Weird Al avec des modèles vocaux d’IA de Madonna et Kurt Cobain, avec des niveaux de réussite variables.
• Google Colab est mentionné comme un outil utile pour exécuter des workflows d’IA générative, en particulier pour les personnes qui ne disposent pas d’un GPU compatible ou ne sont pas à l’aise avec le terminal.
• L’auteur a utilisé le package AICoverGen, qui simplifie le processus de génération de reprises par IA à partir de modèles existants.
• L’article mentionne également les progrès rapides de la synthèse vocale chantée (SVS) et de la conversion de voix chantée (SVC), qui pourraient bientôt permettre de générer de nouvelles chansons à partir de paroles écrites dans le style d’une autre personne.
• L’auteur aborde aussi les implications éthiques et juridiques de l’utilisation du clonage vocal par IA, en soulignant que certains artistes s’en enthousiasment tandis que d’autres s’y opposent.