Des chercheurs d’Apple viennent de développer une nouvelle méthode de vision par ordinateur appelée NeuMan. Cette technique permet de générer à partir d’une seule vidéo des champs de rayonnement neuronaux ou Nerf (pour neural radiance fields) avec un sujet humain. Contrairement à d’autres méthodes de synthèse d’images, NeuMan permet de recréer des postures humaines uniques, sans avoir besoin d’un équipement coûteux et sans annotations manuelles. Les chercheurs ont en effet réussi à construire un Nerf pour la personne et l’environnement en utilisant des masques de segmentation et des estimations de profondeur, ainsi qu’un modèle de forme et de posture statistique humaine.
Les applications dans le jeu vidéo et la réalité virtuelle sautent aux yeux de chacun – notamment à travers un casque de réalité virtuelle. Comme celui qu’Apple doit lancer au premier semestre et qui, selon certaines indiscrétions, coûterait 3 000 dollars, deux fois plus qu’un ordinateur et trois fois plus qu’un téléphone. De quoi perdre ses Nerf.
Source : Arxiv
Pour en savoir plus : Marktechpost
Source archive Kessel : https://qant.kessel.media/posts/pst_9be317efd4034689a3f5d46bce621aab
