L’IA pour comprendre le cerveau • Qant, M. de R. avec Midjourney
Whisper, le modèle de reconnaissance vocale développé par OpenAI, est capable de prédire l’activité cérébrale humaine pendant que nous parlons ou écoutons, et ce, dans des conversations du quotidien. C’est la conclusion d’une équipe de chercheurs après avoir comparé les représentations internes du modèle aux signaux neuronaux enregistrés chez des patients hospitalisés.
Ces patients, tous atteints d’épilepsie et suivis pour des raisons médicales, étaient équipés de centaines d’électrodes posées directement sur leur cortex. Pendant plusieurs jours, leur activité cérébrale a été enregistrée en continu, sans consigne particulière. Ils parlaient librement avec leurs proches ou le personnel hospitalier. Au total, plus de 100 heures de conversations naturelles ont été recueillies, représentant plus d’un demi-million de mots.
Un paradigme écologique à échantillonnage dense pour modéliser l’activité neuronale au cours de conversations dans le monde réel. • Ariel Goldstein et al.
Source archive Kessel : https://qant.kessel.media/posts/pst_11991bc9323e4a558e8176d52aef18cb