Do AI Detectors Work on Music Production? Tested!

Dans cette vidéo, l'auteur teste plusieurs détecteurs d'IA pour voir s'ils peuvent identifier si une musique est générée par intelligence artificielle ou créée par des humains. Il utilise deux de ses propres chansons pour ces tests. La première chanson, intitulée "Use your own VSTs inside of Ace Studio", a été créée en utilisant des instruments virtuels traditionnels, y compris sa propre basse, guitare et batterie jouées avec Kontakt. Les seuls éléments potentiellement considérés comme de l'IA sont une clarinette basée sur un modèle d'IA et des chœurs vocaux à trois parties, également issus de modèles d'IA d'Ace Studio. L'auteur a exporté deux versions de cette chanson : une sans les instruments d'IA et une autre avec. Il a ensuite soumis ces versions à plusieurs détecteurs : Aha Music, Let's Submit, Detect Music et Ghost Production. Les résultats sont mitigés. La version sans IA, censée être 100% humaine, a été détectée comme contenant 0,16% d'IA par Aha Music, et comme "probablement IA" avec 76% de confiance par Let's Submit. Cependant, Detect Music et Ghost Production l'ont jugée 100% réelle et d'origine humaine respectivement. La version "hybride", incluant les deux instruments d'IA, a donné des résultats encore plus contradictoires. Aha Music a indiqué seulement 1,0% d'IA et l'a jugée créée par un artiste humain. Let's Submit l'a classée comme "probablement IA" à 83% et 82% lors de deux tests. Detect Music et Ghost Production l'ont encore une fois identifiée comme 100% réelle et d'origine humaine. L'auteur note que trois des quatre plateformes ont majoritairement conclu que ces pistes étaient d'origine humaine. La deuxième partie de l'expérience porte sur un projet où l'auteur a utilisé ChatGPT et Codec pour l'arrangement et la création d'instruments. Il a également utilisé des instruments virtuels de haute qualité, comme les "Vhorns" de UVI Workstation, pour simuler des instruments acoustiques comme des saxophones. Il a créé une piste entièrement générée par IA, qui a été détectée comme 100% IA par tous les outils. Cependant, lorsqu'il a testé une piste utilisant uniquement les "Vhorns" joués via MIDI et traités dans Ace Studio, les résultats étaient différents. Un détecteur a indiqué 2% d'IA, tandis que d'autres l'ont jugée "probablement humaine" ou "94% réelle". Cela suggère que même l'utilisation d'instruments virtuels de haute qualité peut parfois échouer à être reconnue comme 100% humaine par certains outils. L'auteur a ensuite testé spécifiquement les modèles d'instruments d'IA d'Ace Studio, comme la clarinette et les saxophones basés sur des modèles d'IA, mais qui nécessitent d'être joués. Ces pistes, bien qu'utilisant des modèles d'IA, ont été majoritairement classées comme "réelles" ou "humaines" par Aha Music (0,5% d'IA) et Detect Music (86% réelles), bien que Let's Submit les ait jugées "probablement IA" à 86%. Un test particulièrement intéressant a été réalisé avec Ghost Production, qui a détecté à la fois les instruments virtuels "Vhorns" et les instruments d'IA d'Ace Studio comme étant de la musique humaine, sans détection de motifs d'IA. En conclusion, l'auteur soulève des questions sur la fiabilité et la précision de ces plateformes de détection d'IA. Il constate que si les pistes entièrement générées par IA sont généralement bien identifiées, les musiques hybrides ou utilisant des instruments d'IA joués par des humains peuvent entraîner des résultats incohérents et parfois erronés. Il se demande comment se défendre si un outil détecte de l'IA alors qu'il n'y en a pas dans la création.