Brevet Sony Files pour améliorer la mise en œuvre de l’animation faciale pour les développeurs de jeux

Il a été rapporté que Sony a déposé un brevet pour une méthode permettant de réduire l’effort des animateurs en capturant une image d’un visage généré par l’IA . Les studios Sony Interactive Entertainment sont les meilleurs du secteur pour recréer des performances réelles dans les jeux vidéo.

Dans la dernière génération de consoles, la fidélité a considérablement augmenté. Au cours des dix dernières années, des développeurs tels que Naughty Dog et Sony Santa Monica sont passés du dessin manuel minutieux des visages et de l’animation de mouvement à la création de jeux et de personnages uniquement grâce à la capture de performances. Par conséquent, il n’est pas surprenant que Sony ait déposé une demande de brevet pour un autre système de capture de performances innovant.

La technologie brevetée, introduite le 1er avril 2022 par Sony Interactive Entertainment LLC, utilise les informations de grille d’un acteur humain. Il a été photographié en trois dimensions pour capturer la profondeur de son visage. Ce maillage est souvent fabriqué à la main par des animateurs utilisant des points de sommet sur le visage de l’acteur mocap comme source.

Il est utilisé dans le développement de jeux pour créer des modèles humains précis. Cette méthode est actuellement utilisée dans la plupart des jeux vidéo de niveau AAA, y compris le prochain Spider-Man 2 d’ Insomniac . Lors de l’utilisation d’une combinaison de caméras 3D et 2D pour former un programme d’intelligence artificielle capable d’enregistrer avec précision les expressions faciales et de générer des données de maillage sans intervention humaine, ce système générera automatiquement des données de maillage.

Cette invention utilise l’intelligence artificielle (IA) pour créer des tâches qui nécessitaient auparavant beaucoup d’efforts manuels, conformément aux tendances de l’industrie. L’utilisation de l’IA dans le secteur des jeux vidéo a considérablement augmenté ces derniers temps. Les tâches vont de l’interpolation d’images pour un gameplay plus fluide à la mise à l’échelle de la résolution des textures. En vérité, l’utilisation de l’IA dans les jeux AAA n’a rien de nouveau pour la communauté des joueurs. Rockstar Games a récemment fait l’objet de critiques pour avoir utilisé la mise à l’échelle de l’IA dans le remake de la trilogie GTA , ce qui a entraîné de vilaines fautes d’orthographe dans divers éléments.

Comme explicitement mentionné dans ce brevet, l’utilisation de l’IA dans ce cas vise à réduire l’effort et à contenir les coûts exorbitants de l’animation faciale. Cette méthode prend du temps et de l’argent, nécessitant des centaines d’animateurs pour créer des milliers de formes de tramage et de fichiers de connexion pour reproduire les performances des séquences vidéo.