Brain Mechanisms Underlying Perception of Naturalistic Social Events

Lahnakoski, Juha

Brain Mechanisms Underlying Perception of Naturalistic Social Events

Files

School of Science | Doctoral thesis (article-based) | Defence date: 2015-01-16

Checking the digitized thesis and permission for publishing
Instructions for the author

Unless otherwise stated, all rights belong to the author. You may download, display and print this publication for Your own personal use. Commercial use is prohibited.

Author

Lahnakoski, Juha

Date

2014

Department

Lääketieteellisen tekniikan ja laskennallisen tieteen laitos
Department of Biomedical Engineering and Computational Science

Language

en

Pages

84 + app. 43

Series

Aalto University publication series DOCTORAL DISSERTATIONS, 183/2014

Abstract

Understanding the brain basis of the wide variety of skills needed to seamlessly interact with other people in the social world is one of the most important goals of social cognitive neuroscience. However, it has remained unclear how the elementary processes of social interaction that have been studied so far generalize to complex naturalistic settings where multiple social cues have to be dynamically tracked at the same time. The studies presented here employ movies to depict real-life-like social interactions and map the brain systems that participate in the perception of different aspects of the stimuli, particularly focusing on their social signals. Brain activity during viewing of the movies was recorded with functional magnetic resonance imaging. Additionally, the eye gaze of the subjects was recorded and behavioral measures were acquired in a subset of the experiments. Subjects' viewing patterns and interpretation of the movie were manipulated in one of the studies by asking the subjects to adopt two different perspectives. The brain activity was analyzed by multiple methods: parametric models of stimulus contents, inter-subject correlations of brain activity, independent component analysis, and network analysis. First study compared methods for analyzing both stimulus-related activity and covariation of networks of brain regions during naturalistic conditions to find networks responding to speech, sound, motion categories and low-level visual information. Second study elucidated the organization of the brain regions participating in processing several types of social contents. The results highlight the role of the posterior superior temporal sulcus as a key structure potentially integrating multiple types of social information. Finally, the third study provides first direct experimental evidence for the hypothesis that shared brain activity across individuals reflects shared understanding of the external world. Consistency of the findings demonstrate the feasibility of studying brain responses to simple stimulus features, social movie content as well as high-level perspective taking tasks during very rich naturalistic audiovisual stimulus conditions.

Eräs sosiaalisen kognitiivisen neurotieteen tärkeimmistä tavoitteista on ymmärtää miten aivot mahdollistavat kaikki ne taidot, joita tarvitaan saumattomaan sosiaaliseen vuorovaikutukseen ihmisten kesken. On kuitenkin epäselvää, kuinka aiemmin yksinkertaistetuissa kokeissa havaitut koetulokset yleistyvät monimutkaisiin luonnollisenkaltaisiin tilanteisiin, joissa useita sosiaalisia vihjeitä pitää pystyä seuraamaan yhtä aikaa. Tässä väitöskirjassa koehenkilöille esitettiin luonnollisen kaltaisia sosiaalisia vuorovaikutustilanteita elokuvien avulla ja tutkitaan aivojärjestelmiä, jotka osallistuvat ärsykkeiden eri piirteiden havainnointiin keskittyen erityisesti elokuvien sosiaaliseen sisältöön. Aivojen toimintaa mitattiin toiminnallisen magneettikuvauksen avulla. Lisäksi osassa kokeista mitattiin silmänliikkeitä ja kerättiin koehenkilöiltä arvioita heidän toiminnastaan. Yhdessä kokeista koehenkilöiden katselutapaa ja elokuvan tulkintaa manipuloitiin ohjeistamalla heitä katsomaan elokuvaa eri näkökulmista. Aivotoiminnan analysointiin käytettiin useita lähestymistapoja: parametrisia malleja ärsykepiirteistä, koehenkilöiden aivoaktivaatioiden välistä korrelaatiota ja riippumattomien komponenttien analyysia sekä verkostoanalyysia. Ensimmäisessä osatyössä vertailtiin ärsykepiirteiden havaitsemiseen liittyvää aivoaktivaatiota ja aivojen toiminnallisia verkostoja luonnollisen kaltaisen ärsykkeen aikana ja löydettiin verkostoja, jotka osallistuvat puheen, äänen, liikekategorioiden ja alhaisen tason visuaalisten piirteiden analysointiin. Toinen osatyö valottaa useiden eri sosiaalisten piirteiden analysointiin osallistuvien aivoalueiden organisaatiota. Tulokset viittavat siihen, että ylemmän ohimouurteen takaosa on sosiaaliselle havainnoinnille tärkeä aivoalue, joka mahdollisesti yhdistää hyvin monipuolista sosiaalista informaatiota. Kolmannen osatyön tulokset puolestaan tukevat hypoteesia, että ihmisten tulkitessa ulkomaailmaa samalla tavoin heidän aivotoimintansakin muuttuu samankaltaisemmaksi. Yhtenevät tulokset osoittavat, että sekä yksinkertaisten ärsykepiirteiden ja sosiaalisen sisällön analysointiin, että korkean tason perspektiiviin ottamiseen liittyvää aivotoimintaa voidaan tutkia monimutkaisen audiovisuaalisen ärsykkeen aikana.

Supervising professor

Sams, Mikko, Prof., Aalto University, Department of Biomedical Engineering and Computational Science, Finland

Thesis advisor

Nummenmaa, Lauri, Assistant Prof., Aalto University, Department of Biomedical Engineering and Computational Science, Finland
Jääskeläinen, Iiro, Adjunct Prof., Aalto University, Department of Biomedical Engineering and Computational Science, Finland

Keywords

social cognition, perspective taking, brain, fMRI, ICA, GLM, ISC, sosiaalinen kognitio, perspektiivin ottaminen, aivot

Parts

[Publication 1]: Lahnakoski JM, Salmi J, Jääskeläinen IP, Lampinen J, Glerean E, Tikka P and Sams M. (2012) Stimulus-Related Independent Component and Voxel-Wise Analysis of Human Brain Activity during Free Viewing of a Feature Film. PLoS ONE 7(4): e35215. doi:10.1371/journal.pone.0035215
[Publication 2]: Lahnakoski JM, Glerean E, Salmi J, Jääskeläinen IP, Sams M, Hari R and Nummenmaa L (2012) Naturalistic fMRI mapping reveals superior temporal sulcus as the hub for the distributed brain network for social perception. Frontiers in Human Neuroscience. 6(233). doi:10.3389/fnhum.2012.00233
[Publication 3]: Lahnakoski JM, Glerean E, Jääskeläinen IP, Hyönä J, Hari R, Sams M and Nummenmaa L (2014) Synchronous brain activity across individuals underlies shared psychological perspectives. NeuroImage 100: 316–324. doi:10.1016/j.neuroimage.2014.06.022

Permanent link to this item

https://urn.fi/URN:ISBN:978-952-60-5958-7

Collections

[diss] Perustieteiden korkeakoulu / SCI

Show all metadata