Découvrez comment les biocapteurs multimodaux permettent de percer le mystère de la mémoire humaine et de la prise de décision. Des chercheurs de l’université Roma Tre ont utilisé l’oculométrie et la pupillométrie pour distinguer ce que les participants affirmaient voir de ce qu’ils regardaient réellement, démystifiant ainsi les faux souvenirs déclenchés par des bandes sonores effrayantes.
Table of Contents
Notre blog invité du mois de février met à l’honneur deux scientifiques honoraires qui ont collaboré à deux des dernières publications réalisées avec iMotions [1] [2].
Alessandro Ansani et Marco Marini sont tous deux doctorants à l’université La Sapienza de Rome, mais ils ont une double affiliation. Alessandro bénéficie d’une bourse de recherche à l’université Roma Tre (département de philosophie, de communication et des arts du spectacle), tandis que Marco travaille à l’Institut des sciences et technologies cognitives (ISTC, CNR). Ci-dessous, ils expliquent comment leurs recherches approfondissent la psychologie cognitive, notamment en ce qui concerne l’interprétation des contenus audiovisuels et les processus décisionnels.
Parlez-nous des instituts de recherche avec lesquels vous collaborez.
Grâce à une collaboration entre l’ISTC et l’université Roma Tre, nous avons mené les deux études mentionnées au sein du laboratoire de cognition, d’interaction sociale multimodale et de communication (CoSMIC Lab) du département de philosophie, de communication et des arts du spectacle (université Roma Tre). Comme son nom l’indique, il s’agit d’un laboratoire multidisciplinaire au sein duquel plusieurs groupes de recherche travaillent sur des thèmes variés. Plus précisément, Marco s’intéresse à la neuroéconomie. Il étudie les biais cognitifs qui surviennent lors de la prise de décision ; les travaux d’Alessandro approfondissent les relations complexes entre les bandes sonores et les stimuli visuels narratifs.
Alessandro Ansani :
Le Cosmic Lab compte deux groupes de recherche. Je fais partie du groupe de psychologie cognitive et sociale (dirigé par la professeure Isabella Poggi), qui se consacre principalement à l’analyse de la communication multimodale de divers acteurs, parmi lesquels des chefs d’orchestre (gestuelle et regard) et des guides touristiques. Plus généralement, outre les études sur la musique, les émotions et la prise de décision, notre groupe approfondit d’autres thèmes tels que ceux liés aux aspects cognitifs et affectifs de l’influence sociale, aux émotions sociales, à la communication politique et aux mécanismes de propagation des fausses informations.
Marco Marini :
Mon implication au sein du Cosmic Lab trouve son origine dans une collaboration avec l’Institut des sciences et technologies cognitives (ISTC), où je travaille actuellement. Cet institut mène des activités de recherche, de développement, de transfert de technologie et de formation sur les processus cognitifs, communicatifs et linguistiques : acquisition, traitement, troubles, multimodalité et technologies de la communication.
Explorer grâce à des techniques de recherche innovantes
Pour les deux études (Marini, Ansani et Paglieri, 2020 ; Ansani et al., 2020) menées à l’aide d’iMotions, nous avons utilisé l’oculométrie (sur écran) afin de mesurer à la fois les paramètres oculométriques (fixations, retours sur les zones d’intérêt et temps passé dans plusieurs zones d’intérêt fixes et mobiles) et les paramètres pupillométriques.
Au Cosmic Lab, nous disposons également d’un capteur de réponse galvanique de la peau (GSR) (unité Shimmer3 GSR+) et d’un système d’électroencéphalogramme. De plus, nous lançons actuellement de nouveaux projets utilisant la réalité virtuelle (Oculus).
Pourquoi l’utilisation des biocapteurs est-elle importante dans vos recherches ?
Alessandro : Dans mon domaine, l’analyse des données d’oculométrie et de pupillométrie en fonction de différentes bandes sonores est une approche relativement peu explorée. Dans des études comme celle dont nous parlons, il est essentiel de faire la distinction entre ce que nos participants disent avoir vu et ce qu’ils regardaient réellement.
Le premier indicateur nous renseigne sur ce qu’ils ont le plus mémorisé, sur ce sur quoi ils se sont concentrés et sur les éléments les plus marquants du stimulus ; tandis que le second indicateur révèle une mesure plus indirecte, et donc plus intéressante. Par exemple, nos participants qui ont écouté une bande-son angoissante ont déclaré avoir perçu un personnage caché dans une plus large mesure que ceux qui ont écouté une bande-son relaxante.
Il aurait été tentant d’affirmer que ce morceau en particulier avait accru leur attention sur le personnage caché ; mais il ne s’agissait là que d’une hypothèse non vérifiée, car ils auraient très bien pu déclarer l’avoir vu sans l’avoir réellement vu, simplement parce que ce morceau effrayant aurait pu susciter de faux souvenirs et des suppositions a posteriori. En d’autres termes, si vous me demandiez si j’ai vu quelqu’un qui était caché, et que j’avais justement écouté une bande-son effrayante, je supposerais qu’il y avait quelqu’un, même sans l’avoir vu. La mesure de la direction du regard est essentielle pour lever toute ambiguïté sur ce point.
Marco : Dans les études sur la prise de décision, l’oculométrie peut aider les chercheurs à évaluer le processus décisionnel en leur fournissant des informations supplémentaires sur les mécanismes cognitifs sous-jacents. Dans le cadre de nos travaux, l’utilisation de l’oculométrie nous a permis de comprendre comment l’ajout d’alternatives non pertinentes influence l’attention d’une manière apparemment irrationnelle. De plus, nous avons démontré que les décideurs ont souvent tendance à se laisser guider par des indices perceptifs liés au choix (par exemple, la saillance ou la similitude) au cours du processus décisionnel.
Pourquoi avez-vous choisi iMotions et en quoi cela a-t-il facilité vos recherches ?
Comme notre groupe de recherche couvre plusieurs domaines mais dispose de financements communs, nous recherchions une plateforme qui nous permette d’évaluer plusieurs paramètres simultanément ; quelqu’un nous a proposé iMotions il y a plusieurs années, et dès le premier coup d’œil, cet outil nous a semblé très prometteur. Nous n’avons pas regretté notre choix ! Bien au contraire, nous restons convaincus qu’un logiciel tel qu’iMotions offre une gamme potentiellement infinie d’expériences possibles à mettre en place.
Surtout, cela favorise une approche pluridisciplinaire de la recherche, ce qui correspond exactement à ce qui nous a toujours intéressés, en privilégiant l’utilisation conjointe de plusieurs capteurs.
Nous estimons que deux fonctionnalités sont essentielles : la première est la possibilité de fusionner et de synchroniser plusieurs mesures (la GSR et l’oculométrie, par exemple, ou l’EEG et la GSR) ; sans un logiciel unique, cela serait d’une difficulté insurmontable.
La deuxième caractéristique réside dans la possibilité de concevoir et de mener à bien des expériences très complexes sans posséder de connaissances approfondies en langages de programmation. Malheureusement, certains laboratoires ne disposent pas d’un soutien solide de la part d’ingénieurs ou d’informaticiens ; ils doivent donc travailler avec un outil aussi simple que possible, de type « pointer-cliquer », sans pour autant compromettre la qualité des résultats, la précision des expériences et la rigueur scientifique.
En quoi pensez-vous que votre travail de recherche a évolué par rapport à ce qu’il était auparavant ?
En réalité, il nous est difficile d’imaginer ce qu’était la situation « avant », car nous commençons tous deux notre carrière en tant que jeunes chercheurs. Nous sommes néanmoins pleinement conscients que les expériences menées ces dernières années, telles que la nôtre, auraient été tout à fait hors de portée pour de nombreux chercheurs chevronnés. Au contraire, aujourd’hui, grâce à la technologie, même les jeunes chercheurs inexpérimentés comme nous disposent de vastes possibilités, d’une multitude d’outils extraordinaires et de la chance concrète de prouver de manière irréfutable des théories, grâce à des systèmes technologiques que l’on n’aurait jamais imaginés auparavant.
Nous tenons à remercier Marco Marini et Alessandro Ansani d’avoir pris le temps de nous présenter leur projet de recherche et de nous raconter leur parcours. Nous sommes impatients de suivre leurs contributions à la communauté scientifique dans les années à venir.
Biographie d’Alessandro Asani et de Marco Marini
ALESSANDRO ANSANI, doctorant (psychologie et sciences cognitives à l’université La Sapienza de Rome) et assistant de recherche (Cosmic Lab, université Roma Tre)
Je travaille actuellement comme assistant de recherche au CoSMIC Lab (Université Roma Tre) tout en suivant le programme de doctorat en psychologie et sciences cognitives à l’Université La Sapienza de Rome, dans le cadre d’un projet portant sur l’influence des bandes sonores sur l’interprétation des contenus audiovisuels au regard de plusieurs concepts psychologiques, parmi lesquels l’empathie, les émotions attribuées, les impressions de personnalité, les anticipations de l’intrigue et la perception de l’environnement. Je m’intéresse toujours à de nombreux sujets différents ; mes autres domaines de recherche portent sur la psychologie de la musique, la psychologie morale et le langage corporel d’un point de vue lexicologique.
MARCO MARINI, doctorant * en psychologie et sciences cognitives à l’université La Sapienza de Rome
Je suis doctorant à l’université La Sapienza de Rome et je travaille en collaboration avec l’Institut des sciences et technologies cognitives du CNR (Conseil national de la recherche italien) et la Nudge Unit de la municipalité de Rome. Je m’intéresse principalement à l’étude des biais cognitifs dans la prise de décision à alternatives multiples et à attributs multiples, mais je travaille également actuellement sur les processus neurocognitifs, les stratégies de réponse et les biais systématiques qui sous-tendent la prise de décision humaine. Je m’intéresse également à la prise de décision intertemporelle et probabiliste, et je collabore à un projet sur la théorie du nudge et l’évasion fiscale avec le département d’économie comportementale de la municipalité de Rome.
Références
[1] Alessandro Ansani, Marco Marini, Francesca D’Errico et Isabella Poggi (2020). Comment les bandes sonores façonnent ce que nous voyons : analyse de l’influence de la musique sur les scènes visuelles à travers l’auto-évaluation, l’oculométrie et la pupillométrie. Frontiers in Psychology 11:2242. doi: 10.3389/fpsyg.2020.02242
[2] Marco Marini, Alessandro Ansani et Fabio Paglieri (2020). L’attraction provient de multiples sources : processus attentionnels et comparatifs dans les effets de leurre. Judgment and Decision Making, volume 15, numéro 5, septembre 2020, p. 704-726.