[Traître Câlin] Idylle au Saxiphrage – Music Video

Vidéo

Illustrant le 1er single issu de l’album De la ruine, ce clip, entièrement réalisé sur le logiciel Blender, m’a permis d’approfondir plusieurs domaines de connaissances liés à la 3D.

Ce sont d’abord mes premiers pas dans le domaine de la capture de mouvement par réseau neuronal. L’animation du corps a été adapté d’une vidéo en plan fixe du chanteur, nAda, dansant et chantant sur le morceau, sans aucun des capteurs ou repères utilisés de manière traditionnelle. Cette vidéo a ensuite été traitée par réseau neuronal pour extraire une armature animée qui me servira alors de guide pour animer le modèle conçu sur Blender. Quelques ajustement ont été nécessaires, notamment pour fixer les pieds au sol. Les mains et le visage ont ensuite été animés par points clés.

Ce fut également mon début d’apprentissage du nouvel outil que l’équipe de Blender mettait alors en place, un outil de génération procédurale de géométrie, les Geometry Nodes. L’évolution de l’apparence du corps est généré avec cet outil, des zones se creusent, rongées par des asticots issus d’œufs les parsemant, et se transformant finalement en mouches. Le corps de viande se liquéfie alors tandis que le squelette se désagrège en poussière.

Plusieurs types de simulations de liquides sont également utilisées, ainsi que d’autres simulations physiques. Les textures sont toutes générées de manière procédurales.

Illustrating the first single from the album De la ruine, this clip, produced entirely on Blender software, allowed me to deepen several areas of knowledge linked to 3D.

First of all, these are my first steps in the field of motion capture by neural network. The body animation was adapted from a still-shot video of the singer, nAda, dancing and singing to the track, without any of the sensors or cues used traditionally. This video was then processed by a neural network to extract an animated frame which will then serve as a guide for me to animate the model designed in Blender. Some adjustments were necessary, notably to secure the feet to the ground. The hands and face were then animated by key points.

It was also my beginning to learn the new tool that the Blender team was then implementing, a procedural geometry generation tool, Geometry Nodes. The evolution of the appearance of the body is generated with this tool, areas hollow out, eaten away by maggots from eggs dotting them, and finally transforming into flies. The meat body then liquefies while the skeleton disintegrates into dust.

Several types of liquid simulations are also used, as well as other physical simulations. The textures are all procedurally generated.