Chaîne de pensée et arbre de décision des LLM • Qant, M. de R. avec Midjourney
L’évaluation des performances des LLM n’est pas une science exacte, mais celle du raisonnement en chaîne (chain-of-thought ou CoT) dans les modèles multimodaux reste une question particulièrement ouverte. Or, c’est précisément vers les CoT que convergent les modèles avancés.
Une équipe de chercheurs vient de proposer MME-CoT, un benchmark spécialisé analysant la qualité, la robustesse et l’efficacité du raisonnement dans les LMM. Un test d’envergure qui révèle des tendances inattendues sur la performance des modèles.
Source archive Kessel : https://qant.kessel.media/posts/pst_d25783544ac14c378ddd570e8d002f0e
