Kinetix

Kinetix, l’animation à partir de vidéos : une alternative à la motion capture ?

Startup française fondée il y a presque un an par Yassine Tahi et Henri Mirande, Kinetix a un pitch attrayant : la génération automatique d’animations 3D de personnages, à partir d’une simple vidéo.

L’idée est donc de proposer une animation, certes moins précise qu’en motion capture, mais également beaucoup moins chère et complexe à capter.

Un fonctionnement intuitif

En pratique, le fonctionnement est relativement simple : il suffit d’envoyer un extrait vidéo à Kinetix, de sélectionner la portion qui nous intéresse, et l’outil se charge de détecter les mouvements du sujet. On pourra alors disposer d’un aperçu de l’animation, puis la télécharger aux formats FBX, GLB.

Pour un résultat optimal, le sujet devra être visible en permanence (en évitant qu’il ne sorte, même partiellement, du cadre, ou qu’il ne soit occulté par un objet/une personne). En outre, on évitera les vêtements amples, les mouvements trop rapides (si le framerate ne suit pas), les images trop sombres, les vidéos non stabilisées, ou encore les contenus basse définition.
Autant de contraintes qui sont finalement assez évidentes au regard de l’objectif : détecter les mouvements des différentes articulations.

Si ces conditions sont respectées, le résultat est plutôt intéressant, même si évidemment pas aussi précis qu’en motion capture : un nettoyage sera nécessaire. Notez également que la détection s’applique sur les mouvements généraux du corps : mains, expressions faciales ne sont pas au menu pour le moment.

Voici un aperçu de nos essais :

Cas 1 : Shia LaBeouf sur fond vert. La reconnaissance est plutôt efficace, sauf (évidemment) sur le bas des jambes, qui sont hors champ.
Cas 2 : la scène de danse du film Napoleon Dynamite. Là encore, détection plus approximative sur le bas du corps, sans doute par manque d’éclairage.
Cas 3 : un extrait de vidéo de gym (source : chaîne Youtube MadFit). Kinetix semble hésiter sur la détection de la jambe qui est levée (le pied droit ne reste pas au sol).

Voici également quelques vidéos mises en ligne par Kinetix :

Pour vous faire un avis objectif, nous vous conseillons de faire vos propres tests : l’outil est disponible en beta gratuite sur le site officiel. Après inscription vous pourrez convertir gratuitement jusqu’à 5 minutes de vidéo (il est possible de demander des crédits supplémentaires).

Une beta, et après ?

L’équipe de Kinetix nous a donné quelques détails sur sa roadmap. En ce qui concerne le modèle économique, Kinetix proposera un système d’abonnement, avec tarifs dégressifs selon la durée et une offre entreprise sur demande. On appréciera la présence d’une offre gratuite (à usage personnel uniquement) avec 1 minute d’animation par mois : suffisant pour suivre les améliorations du produit, mais aussi pour des projets de type court-métrage.

Kinetix nous indique par ailleurs qu’une version « Advanced Beta » sera lancée début mai.

Enfin, à plus long terme, la startup ne compte pas se limiter aux bipèdes : d’ici 2023, les quadrupèdes seront au programme.

Pour plus de détails et pour tester l’outil, rendez-vous sur le site officiel.

A Lire également

1 commentaire

Shadows 27 avril 2021 at 20 h 52 min
Je vais probablement interviewer l’équipe Kinetix prochainement : si vous avez certaines questions, n’hésitez pas à me l’indiquer !

Laissez un commentaire