MATCHMOVING - INTEGRATION 3D dans de la vidéo

Cette partie est particulièrement intéressante. Cependant, vous devrez avoir quelques prérequis :
- Être habitué à manipuler photoshop (création de textures, calques, canal alpha...)
- Être habitué un minum à de la manipulation de vidéo et de votre outil 3D (Interface, manipulation d'objet / propriétés / paramètres de rendus etc...)

PARTIE 1 : Le matchmoving dans BOUJOU THREE

ETAPE 1 : préparer et importer la vidéo dans BOUJOU

Maya est capable de faire le matchmoving grâce à Live, mais j'ai pu bénéficier d'une petite formation et d'utilisation à BOUJOU, dans sa version 3.
(Actuellement 4)...
Préparation de votre séquence :
Préparez votre vidéo en fichier frame / frame au format TGA

Boujou est capable d'ouvrir l'AVI, mais l'ouverture des fichiers individuels est moins gourmand en resssource que le fichier AVI...

Cliquez sur IMPORT SEQUENCE...


Choisissez la première image (ici ma séquence fait partie d'une séquence plus longue, et je n'ai exporté que la partie avec 3D à partir de 1001)

Vous devriez avoir votre séquence entièrement chargée dans BOUJOU.
(Notez l'index des images qui commencent à 1001 dans mon cas !)

ETAPE 2 : LE TRACKING

Dans cette étape, BOUJOU va calculer les déplacements d'objets, de points de références et calculker leur vecteur de déplacement.

Cliquez sur FEATURE TRACKING
Je préfère choisir LARGE & augmenter la sensibilité.
Ceci va créer des points un peu partout (sinon, les zones uniformes n'auront aucun point !!!)

Les temps de calculs peuvent être assez longs.


BOUJOU va donc calculer les mouvement de points de références à l'écran. Ce sont les petits spaghettis que vous allez voir apparaître à l'écran...
Vous pouvez faire PLAY, ces points vont coller au pixel près à leur point de référence.

ETAPE 3 : TRACKING 3D de la CAMERA

Pour le tracking 3D de la caméra, plus vous pourrez donner d'info à BOUJOU, plus les résultats seront optimisés.
Ici, sur le BOUTON FOCAL LENGTH, vous pouvez définir la distance focale de votre caméra.

De même vous pouvez dire si votre séquence est en focale fixe ou alors avec des coups de zoom !
Ici, je suis en "focale fixe inconnue" (Focale intermédiaire sur mon scope)

Ensuite appelez le CAMERA TRACKING et faites un tracking 3D COmplet.
En général, les meilleurs résultats sont faits avec un camera SMOOTHING de 1.

(c'est un lissage des tremblements de la caméra)
Si vous ne tremblez pas trop, ce réglage devrait être OK...

START : les temps de calculs sont longs... BOUJOU va comparer les déplacements des points de références pour deviner leur position dans un espace 3D (y compris la position de la caméra... pour vous dire la complexité des algrythmes de recherche !!)

Une fois terminé, vous pouvez basculer en 3D et voir vos points de référence palcé en 3D.

En rouge, le chemin de la caméra... Le mouvement est fluide.
S'il présente des "sautes", des dents de scies, augmentez le CAMERA PATH SMOOTHING...

Si vous faites PLAY; les points restent immobiles, et la caméra seule, sur le fil rouge, bouge...
SHIFT + CLIC GAUCHE POUR une rotation 3D
SHIFT + CLIC DROIT pour un zoom

ETAPE 4 : optimisation de l'espace 3D

Le résultat obtenu est en partie satisfaisant. Et afin d'optimiser le plus possible votre 3D tracking, vous devez fournir le plus d'infos possibles sur la structure 3D de votre environnement.
Grosso modo : il va falloir définir les points communs d'un mur / table / sol comme faisant partie d'un plan orienté...

Grâce à la partie 2D, selectionnez tous les points du sol ou de la table ( pas les objets of course !)
(CTRL+CLIC pour en selectionner de nouveau sur des images différentes.
SHIFT CLIC (droit et gauche pour le zoom et l'avancement du film)

SCENE GEOMETRY :
Choisissez le type de géométrie (plan z-x, x-y...) ou même un point pour l'origine de votre espace 3D...

Puis on revient sur le CAMERA TRACKING > ADJUST ONLY
Donc, on va partir de la solution 3D de départ que l'on ajuste avec les infos données sur les plans de notre scène.

Ici, le plan de base est bien conforme au plan du bureau.

Afin de voir si les calculs sont bon, BOUJOU propose de placer des objets 3D dans cet espace.

ETAPE 5 : CONTROLE DE LA 3D

ADD TEST OBJECTS : Vous pouvez placer des objets simples dans la scène 3D afin de voir si la solution 3D est satisfaisante...


Ici la coccinelle est placée sur le bureau...
Il est bien sur possible de bouger, redimensionner les objets ! (CLIC DROIT dessus)

(ou encore les boutons en haut à droite de BOUJOU avec la coccinelle)

Différents objets sont testés...

ETAPE 6 : EXPORT DE LA CAMERA vers le soft 3D

Si la solution 3D et le caméra tracking est satisafaisant, on peut exporter la solution vers notre logiciel 3D (ici MAYA)
1/ Export de la vidéo au format MAYA IFF

File / Advanced / Export séquence

Format MAYA IFF !

PUIS EXPORT CAMERA !
Choisissez aussi le type de caméra (camera fixe ou non...)


(notez encore que le mouvement commence à 1001 et termine à 1274)

Et voilà, pour le moent, c'est fini pour BOUJOU !!!

PASSEZ A L'ETAPE 2 : IMPORTATION SOUS MAYA