Après Dall-e pour l’illustration, Da Vinci 3 pour les textes longs et ChatGPT pour les dialogues, OpenAI vient de présenter Point-e, un modèle dédié à la conception 3D. Il s’adresse donc aux métiers du jeu vidéo et de l’animation 3D. Plus précisément, Point-E génère successivement, à partir d’un texte, une image puis un nuage de points, qui représente une forme en trois dimensions. Ces nuages de points sont plus faciles à synthétiser, mais ils ne capturent pas la forme ou la texture détaillée d’un objet.
Pour surmonter cette limitation, l’équipe de Point-E a entraîné un autre système d’IA à convertir les nuages de points de Point-E en maillages 3D, c’est-à-dire des collections de sommets, d’arêtes et de faces qui définissent un objet et sont fréquemment utilisés dans la modélisation et la conception 3D. Cependant, le modèle peut parfois manquer certaines parties des objets, ce qui donne des formes en blocs ou déformées.
Source : Open AI
Pour en savoir plus : Tech Crunch
Source archive Kessel : https://qant.kessel.media/posts/pst_1fb7fd806cbc4299a0a8aef12bcd2a58