La technologie

Le réseau de neurones de Facebook a permis de contrôler les mouvements des personnes filmées

Les réseaux de neurones savent déjà créer des visagespersonnes inexistantes et même améliorer la qualité de la vidéo. La technologie continue d'évoluer et très rapidement - cela semblait impossible, mais désormais, les personnes filmées en vidéo peuvent être contrôlées à l'aide d'un clavier d'ordinateur. Cela a été rendu possible grâce au travail de l'équipe de développement de Facebook AI Research, qui a formé le réseau de neurones à reconnaître une personne en mouvement dans une vidéo, à modifier l'image de fond et à en contrôler les mouvements. C'est un must - bon, les développeurs ont partagé une vidéo détaillée.

Basé sur une technologie inventée par les développeurssur Facebook, il existe deux algorithmes de réseau neuronal - Pose2Pose et Pose2Frame pour transférer des objets d’une vidéo à une autre. Ils ont également utilisé l'algorithme DensePose, qui transforme une image en deux dimensions d'une personne filmée sur une vidéo en un modèle en trois dimensions.

Donc, pour transformer une vidéo régulière enl’algorithme DensePose crée un modèle 3D d’une personne donnée. Ensuite, l'algorithme Pose2Pose transforme l'enregistrement avec l'animation d'une personne en mouvement en une vidéo avec un arrière-plan noir. Déjà à ce stade, le réseau de neurones est capable de percevoir les frappes sur le clavier et de déplacer le «personnage du jeu» dans la bonne direction. Enfin, l'algorithme Pose2Frame crée l'image finale avec une personne en mouvement et l'animation correspondante.

</ p>

D'autres exemples de travaux sont également visibles sur la vidéo.réseau de neurones. Bien sûr, vous pouvez voir beaucoup d'artefacts sur ces images, mais le fait que vous puissiez contrôler une personne à partir d'une vidéo est très impressionnant. Il est probable que cette technologie sera utilisée dans l'industrie du jeu. Les réseaux de neurones sont utiles dans le domaine des jeux et du cinéma, lisez notre documentation spéciale.

Le nouveau réseau de neurones de Facebook vous a-t-il impressionné? N'hésitez pas à partager votre opinion dans les commentaires ou dans notre télégramme de discussion.

Avis Facebook pour l'UE ! Vous devez vous connecter pour afficher et publier des commentaires FB !