Don Diablo révolutionne les clips vidéo avec NVIDIA RTX et l'IA générative pour « Blackout » - La vidéo

L'artiste de musique électronique Don Diablo poursuit son exploration des frontières entre la musique, l'art visuel et la performance live. La vidéo de son dernier single, « BLACKOUT », représente une expérience innovante avec l'intelligence artificielle générative, mettant en œuvre un flux de travail hybride qui intègre des outils basés sur NVIDIA RTX et des solutions cloud avancées.

Située dans un entrepôt industriel, la vidéo plonge le spectateur dans un scénario généré par l'IA comprenant des effets visuels stylisés, des atmosphères cinématographiques et des éléments graphiques personnalisés.

Les phases d’expérimentation visuelle et de création d’images ont été menées en local sur un poste de travail équipé d’un GPU NVIDIA GeForce RTX 5090, assurant un contrôle créatif complet. La phase d'animation finale a plutôt été créée à l'aide de Kling AI, un outil de génération vidéo basé sur le cloud, démontrant une approche hybride qui maximise l'efficacité et la qualité visuelle .

L'ensemble du processus de création visuelle du clip vidéo, de la définition du style à la modélisation de l'identité visuelle, a été géré localement via ComfyUI, une interface utilisateur visuelle basée sur des nœuds conçue pour créer et personnaliser des flux de travail génératifs avec l'intelligence artificielle .

Grâce à une configuration intuitive, l’équipe a pu lancer des workflows préconfigurés et expérimenter librement différents modèles et techniques génératives. ComfyUI a assuré la rapidité de fonctionnement, la facilité d'utilisation et la compatibilité avec une large gamme d'outils open source, permettant des itérations rapides et des résultats visuels cohérents avec la vision artistique de Don Diablo.

Pour l’artiste, les images devaient être profondément intégrées à son identité artistique, transcendant le rôle de simples effets visuels. À cette fin, un modèle personnalisé a été formé à l'aide d'un ensemble de données spécifique du visage de Diablo , en utilisant la méthode d'adaptation de bas rang dans l'interface FLUXGYM.

Le modèle ainsi créé a ensuite été importé dans ComfyUI et intégré dans un pipeline Stable Diffusion pour la génération d'images stylisées. Un nœud d'intégration d'identité dédié a assuré la cohérence des traits du visage d'une image à l'autre, en maintenant un style visuel uniforme et immédiatement reconnaissable.

Une fois les images clés définies, l'équipe a utilisé Kling AI, une plateforme basée sur le cloud, pour les animer en séquences dynamiques, en tirant parti de ses capacités physiques et cinématographiques avancées pour donner vie aux visions créatives.

« Travailler avec ces nouveaux outils d’IA, c’était comme entrer dans mon esprit », a commenté Diablo . « Nous avons pu élever le niveau de créativité, modéliser des images en temps réel et rester concentrés sur la narration. L'IA s'est avérée être un outil très puissant pour la créativité. »

Voici le clip complet de « BLACKOUT », qui montre comment l'équipe a donné vie à ses idées créatives avec RTX AI

Les artistes et les développeurs utilisent déjà activement l’IA générative pour rationaliser leurs processus créatifs et étendre les capacités de leur travail, de la conception de nouveaux concepts à la conception de mondes virtuels et au développement d’applications intelligentes. Avec les PC RTX AI, les professionnels peuvent compter sur des performances élevées et accéder aux modèles et outils d'IA les plus récents et les plus avancés.