D'accord, d'accord, d'accord, je me lance paisiblement dans le train de l'intelligence artificielle, en particulier dans le domaine de la vidéo. Je suis conscient que je suis en retard de plusieurs mois. Cependant, vaut mieux tard que jamais.
L'IA dans la vidéo est un domaine fascinant et en plein essor, offrant de nombreuses possibilités créatives. Cependant, j’ai récemment observé de nombreuses vidéos présentant un beau visuel mais sans réelle connexion émotionnelle. J'ai donc eu l'idée de tester une vidéo qui combine du contenu IA et du visuel analogue. Un type de vidéoclip.
Je vous expose le résultat et une analyse par la suite.
Le résultat:
Attention : J'ai utilisé un compte gratuit et la version Gen2 plutôt que Alpha Gen-3. Il y a sans doute des progrès importants dans la dernière version.
Analyse:
Dans un premier temps, j'ai sélectionné une musique qui a une forte charge émotionnelle et qui peut soutenir un mélange de vidéos stock et de visuels artificiels. Par la suite, l'objectif était de créer un genre de vidéoclip avec une chanteuse IA et une histoire qui l'accompagne.
Première étape. Ajouter les paroles de la chansons dans le Text-To-Speech de Veed.
2e étape, retimer le Lip Sync manuellement sur la chanson dans le logiciel de montage Premiere Pro.
J'ai aussi testé en parallel l'option Lip Synch de Gen2, mais le résultat est moins réaliste. Il est probable que cela soit dû au fait que fait que l’engin de Text to Video est modélisé de A à Z contrairement à des pixels en mouvement.
Le résultat avec un avatar. Bof.
Troisièmement,, j’ai créé un 2e plan de la chanteuse avec Gen-2.
Ensuite, j’ai ajouté les plans du couple pour créer une trame narrative.
Le tout à été assemblé sur la musique dans Premiere.
Malgré tout, le résultat est satisfaisant. Nous sommes conscients que cela ne méritera pas de prix dans les festivals, mais ce n'était pas l'objectif. L’exercice à seulement pris quelques heures, de la création de l’avatar au montage final.
L'IA en vidéo est à la fois intrigante et prometteuse. Elle ouvre de nombreuses possibilités pour les créateurs, mais il est important de l'aborder avec une compréhension claire de ses capacités et de ses limites actuelles. Continuer à expérimenter et à explorer ces outils peut mener à des innovations passionnantes dans le domaine de la vidéo.
En attendant, visitez le site de Runway afin de découvrir de magnifiques projets.
Quelle est votre opinion sur l'IA en vidéo? Intrigant ou non?