Després d'estudiar les meves possibilitats actuals amb la captura de moviments he fet la mateixa investigació per a la captura facial.
És important ja que no és el mateix tenir un personatge que mou el cos però té la cara estàtica que tenir un personatge que té expressió facial mentre es mou.
Per exemple, aquí sota poso l'animació de Mark en posició d'espera. Veureu a l'esquerra el personatge sense expressió facial i a la dreta el mateix però amb una captura facial.
La diferència és subtil però fa que el personatge es vegi més viu. (Per cert, la barba i les celles només es poden veure en primer pla perquè estan pendents de ser desenvolupats en altres LOD.)
Per aconseguir posar aquesta animació a la cara cal un sistema de captura facial on, igual que amb el cos, hi ha diversos sistemes com el vestit, la IA al nuvol, Kinect, etc.
En aquest cas he explorat menys opcions perquè existeix l'app Live Link Face pròpia d'Unreal. El funcionament és similar al de Pose AI que vaig comentar en el passat post, on fas servir un iPhone per capturar moviment en temps real i un plugin per gravar-lo a Unreal.
A diferència de Pose AI, Live Link Face s'aprofita de la tecnologia de reconeixement facial d'Apple per detectar les faccions de la cara i els moviments que fem i s'aconsegueix una animació amb un resultat sorprenent.
Potser l'animació facial obtinguda no és perfecta però ara com ara és més que suficient per al meu projecte.
Si volgués anar més enllà, ara mateix, l'opció que tindria seria comprar un sistema de captura més especialitzat com ara Faceware o el mòdul facial de Rokoko.
El següent pas serà programar el moviment bàsic del personatge.