“Les secrets de fonctionnement du robot” (Qant, M. de R. avec Midjourney)
Quels mystères cache la fraise de Sam Altman ? Dans la nuit de jeudi à vendredi, OpenAI a dévoilé GPT o1, son dernier modèle d’IA en date. Une version bien plus coûteuse que GPT-4o, qui s’explique notamment par sa capacité à répondre à des questions plus complexes, grâce notamment à son intégration de la méthode d’apprentissage par renforcement.
L’une des principales caractéristiques de GPT o1 réside dans sa capacité accrue de compréhension et de génération de langage naturel. Le modèle offre en effet une interprétation plus fine des nuances contextuelles, ce qui permet des réponses plus précises et adaptées à des échanges prolongés.
Très peu de choses ont filtré sur l’architecture de ce nouveau modèle, qui intègre de l’apprentissage par renforcement (à l’instar de Gemini) pour en faire un “Process-supervised Reward Model (PRM)”, mais aussi une nouvelle approche pour l’inférence.
Source archive Kessel : https://qant.kessel.media/posts/pst_4bd55c1e0993488f87c0fbf442752139
