La versione 4.25 di Unreal Engine si accoppia con l'app per iOS per acquisire movimenti facciali
La versione 4.25 di Unreal Engine può essere abbinata a una nuova app iOS, Link live per Unreal Engine, per catturare espressioni facciali di attori dal vivo. La nuova app si allontana dal sofisticato software di riconoscimento facciale e motion tracking già incluso in iPhone. Pertanto, se il tuo iPhone ha già una videocamera di profondità e funzionalità ARKit, puoi accedere gratuitamente a queste nuove funzionalità di Unreal Engine scaricando l'app dall'App Store.
Basato su un demo online, le capacità grezze di questa nuova app sono piuttosto impressionanti. Grandi movimenti facciali come movimenti della bocca, movimenti oculari e altri grandi movimenti facciali vengono catturati senza problemi in tempo reale. Funziona mappando animazioni pre-costruite di un designer su espressioni facciali tracciate da ARKit. Ad esempio, un iPhone con queste abilità nota quando batti l'occhio destro e ha un trigger di evento per questa azione. Con Live Link per Unreal Engine, puoi associare quell'evento a un'animazione del tuo personaggio che fa battere l'occhio destro. Ora, ogni volta che il tuo attore dal vivo sbatte le palpebre sull'occhio destro, viene attivata l'animazione del battito cardiaco del personaggio del gioco.
Sono entusiasta di vedere come verrà implementata questa nuova tecnologia. L'app è stata appena rilasciata, quindi è troppo presto per vedere esempi della sua piena capacità. Sulla base della demo che ho visto e delle foto di esempio rilasciate nel comunicato stampa, un potenziale problema è catturare i movimenti del viso. Ad esempio, sono i sottili movimenti muscolari intorno agli occhi che ci danno spunti sottili sul vero stato emotivo di coloro che ci circondano. Senza questo, i personaggi possono sembrare piatti e senza vita spingendo il personaggio nella misteriosa valle. Questo non è un grosso problema per la progettazione del gioco perché questi dettagli potrebbero essere aggiunti una volta che la maggior parte del lavoro è stata eseguita con questo strumento di acquisizione. Tuttavia, mi chiedo se Live Link per Unreal Engine vedrà un appello diffuso per i flussi live se questa è davvero una limitazione.
Sei uno sviluppatore e stai provando l'app Live Link per Unreal Engine? Pubblica un link a ciò su cui stai lavorando di seguito. Oppure, se hai pensato a come utilizzare questa nuova tecnologia, ti preghiamo di condividere i commenti qui sotto.
fonti: Gamastra, App Store, Documenti di Unreal Engine, Youtube, E Unreal Engine