SIGGRAPH 2018 : de la motion capture à partir d’une simple vidéo

SIGGRAPH 2018

W. Xu, A. Chatterjee, M. Zollhöfer, H. Rhodin, D. Mehta, H-P. Seidel et C. Theobalt présenteront lors du SIGGRAPH 2018 leur projet de recherche intitulé MonoPerfCap: Human Performance Capture from Monocular Video.

L’objet de cette publication est, comme son nom l’indique, la capture de mouvements d’humains à partir d’une vidéo classique, avec une unique caméra.

Le pipeline s’appuie sur trois composants :
– la création d’un modèle personnalisé du sujet, à partir d’une vidéo dans laquelle la personne ne bouge pas ;
– lors de la capture proprement dite, une estimation de la pose est effectuée ;
– enfin, cette estimation est corrigée en s’appuyant sur la silhouette de la personne.

Les résultats sont relativements bons. Ils dépassent clairement les précédentes tentatives du genre (comme le montre la fin de la vidéo) et se rapprochent de ce que l’on peut obtenir avec une caméra stéréoscopique.

A Lire également