Een naturalistische opzet voor het presenteren van echte mensen en live acties in experimentele psychologie en cognitieve neurowetenschappelijke studies
Summary
Deze studie presenteert een naturalistische experimentele opstelling waarmee onderzoekers real-time actiestimuli kunnen presenteren, responstijd- en muisvolggegevens kunnen verkrijgen terwijl deelnemers reageren na elke stimulusweergave en acteurs kunnen wisselen tussen experimentele omstandigheden met een uniek systeem, waaronder een speciaal transparant organisch lichtgevend diode (OLED) -scherm en lichtmanipulatie.
Abstract
Perceptie van de acties van anderen is cruciaal voor overleving, interactie en communicatie. Ondanks tientallen jaren van cognitief neurowetenschappelijk onderzoek gewijd aan het begrijpen van de perceptie van acties, zijn we nog ver verwijderd van het ontwikkelen van een neuraal geïnspireerd computervisiesysteem dat de perceptie van menselijke actie benadert. Een grote uitdaging is dat acties in de echte wereld bestaan uit tijdelijk ontvouwende gebeurtenissen in de ruimte die “hier en nu” plaatsvinden en uitvoerbaar zijn. Daarentegen hebben visuele perceptie en cognitief neurowetenschappelijk onderzoek tot nu toe grotendeels actieperceptie bestudeerd via 2D-displays (bijv. Afbeeldingen of video’s) die de aanwezigheid van acteurs in ruimte en tijd missen, vandaar dat deze displays beperkt zijn in het bieden van bedienbaarheid. Ondanks de groeiende hoeveelheid kennis in het veld, moeten deze uitdagingen worden overwonnen voor een beter begrip van de fundamentele mechanismen van de perceptie van de acties van anderen in de echte wereld. Het doel van deze studie is om een nieuwe opstelling te introduceren om naturalistische laboratoriumexperimenten uit te voeren met levende acteurs in scenario’s die de echte wereld benaderen. Het kernelement van de opstelling die in deze studie wordt gebruikt, is een transparant OLED-scherm (organic light-emitting diode) waarmee deelnemers de live-acties van een fysiek aanwezige acteur kunnen bekijken terwijl de timing van hun presentatie nauwkeurig wordt geregeld. In dit werk werd deze opstelling getest in een gedragsexperiment. Wij geloven dat de opzet onderzoekers zal helpen fundamentele en voorheen ontoegankelijke cognitieve en neurale mechanismen van actieperceptie te onthullen en een basis zal vormen voor toekomstige studies die sociale perceptie en cognitie in naturalistische omgevingen onderzoeken.
Introduction
Een fundamentele vaardigheid voor overleving en sociale interactie is het vermogen om de acties van anderen waar te nemen en te begrijpen en ermee om te gaan in de omgeving. Eerder onderzoek in de afgelopen decennia heeft een belangrijke bijdrage geleverd aan het begrijpen van de fundamentele principes van hoe individuen de acties van anderen waarnemen en begrijpen 1,2,3,4,5,6,7,8,9,10,11 . Niettemin, gezien de complexiteit van interacties en de omstandigheden waarin ze plaatsvinden, is er een duidelijke behoefte om de hoeveelheid kennis in naturalistische omgevingen verder te ontwikkelen om een vollediger begrip van deze complexe vaardigheid in het dagelijks leven te bereiken.
In natuurlijke omgevingen zoals onze dagelijkse levensomgevingen vertonen perceptie en cognitie belichaamde, ingebedde, uitgebreide en actieve kenmerken12. In tegenstelling tot internalistische verslagen van hersenfuncties die de neiging hebben om de rollen van het lichaam en de omgeving te onderschatten, richten hedendaagse benaderingen van belichaamde cognitie zich op de dynamische koppeling van de hersenen, het lichaam en de omgeving. Aan de andere kant hebben de meeste sociale psychologie, cognitieve psychologie en neurowetenschappelijk onderzoek naar actieperceptie de neiging om aan te nemen dat het gebruik van goed gecontroleerde en vereenvoudigde experimentontwerpen in laboratoriumomstandigheden (bijv. Afbeeldingen of video’s in geautomatiseerde taken) resultaten oplevert die kunnen worden gegeneraliseerd naar complexere scenario’s zoals interacties in de echte wereld 1,2,3,4,5,6,7 ,8,9,10,11. Deze aanname garandeert dat onder veel omstandigheden robuuste en betrouwbare gegevens kunnen worden verkregen. Niettemin is een bekende uitdaging dat de validiteit van de modellen die zijn afgeleid van zorgvuldig gecontroleerde experimenten beperkt is wanneer ze worden getest in een echte context13. Bijgevolg zijn er 13,14,15,16,17,18,19,20,21,22 verdere onderzoeken uitgevoerd om de ecologische en externe validiteit van stimuli en experimentele ontwerpen in verschillende onderzoeksgebieden aan te pakken.
In deze studie wordt een nieuwe methode voorgesteld om te onderzoeken hoe individuen de acties van anderen waarnemen en evalueren door live acties te gebruiken die worden uitgevoerd door een echte, fysiek aanwezige acteur. Scenario’s die vergelijkbaar zijn met real-life contexten worden gebruikt, terwijl de experimentatoren controle hebben over mogelijke verstorende factoren. Deze studie is een vorm van “naturalistisch laboratoriumonderzoek”, in het kader van Matusz et al.14, dat kan worden opgevat als een tussenfase tussen “klassiek laboratoriumonderzoek”, dat gebruik maakt van maximale controle over de stimuli en omgeving, vaak ten koste van natuurlijkheid, en “volledig naturalistisch real-world onderzoek”, dat gericht is op het maximaliseren van natuurlijkheid ten koste van controle over de stimulatie en de omgeving 14. De studie heeft tot doel de behoefte aan empirisch onderzoek op dit niveau in actieperceptieonderzoek aan te pakken om de kloof te overbruggen tussen de bevindingen verkregen in traditionele laboratoriumexperimenten met een hoge mate van experimentele controle en de bevindingen verkregen in studies uitgevoerd in volledig onbeperkte, natuurlijke omgevingen.
Gecontroleerde versus onbeperkte experimenten
Experimentele controle is een efficiënte strategie voor het ontwerpen van experimenten om een specifieke hypothese te testen, omdat het onderzoekers in staat stelt om doelvariabelen te isoleren van waarschijnlijke verstorende factoren. Het maakt het ook mogelijk om dezelfde hypothese opnieuw te bekijken met bepaalde niveaus van wijzigingen, zoals het gebruik van enigszins of totaal verschillende stimuli in hetzelfde ontwerp of het testen van dezelfde stimuli in alternatieve experimentele opstellingen. Systematisch onderzoek door middel van gecontroleerde experimenten is een traditionele vorm van methodologie in onderzoek in de cognitieve wetenschap en relevante domeinen. Gecontroleerde experimenten helpen nog steeds om de hoeveelheid kennis vast te stellen over de fundamentele principes van cognitieve processen in verschillende onderzoeksdomeinen, zoals aandacht, geheugen en perceptie. Recent onderzoek heeft echter ook de beperkingen van traditionele laboratoriumexperimenten erkend in termen van het generaliseren van de bevindingen naar echte omgevingen, en onderzoekers zijn aangemoedigd om studies uit te voeren in verbeterde ecologische omgevingen 13,14,15,16,17,18,19,20,21 . Deze verschuiving is bedoeld om twee belangrijke kwesties aan te pakken met betrekking tot de discrepantie tussen traditionele laboratoriumexperimenten en real-world omgevingen. Ten eerste is de wereld buiten het laboratorium minder deterministisch dan bij experimenten, wat de representatieve kracht van systematische experimentele manipulaties beperkt. Ten tweede is het menselijk brein zeer adaptief, en dit wordt vaak onderschat vanwege de praktische beperkingen van het ontwerpen en uitvoeren van experimentele studies22. Het concept van “ecologische validiteit”23,24 is gebruikt om methoden aan te pakken om dit probleem op te lossen. De term wordt meestal gebruikt om te verwijzen naar een voorwaarde voor de generalisatie van experimentele bevindingen naar de echte wereld buiten de laboratoriumcontext. Ecologische validiteit is ook geïnterpreteerd als een verwijzing naar het valideren van vrijwel naturalistische experimentele opstellingen met ongelimiteerde stimuli om ervoor te zorgen dat de onderzoeksopzet analoog is aan real-life scenario’s25. Vanwege de hoge mate van variatie in de interpretatie van deze term, is een goed begrip van de voordelen en beperkingen van alternatieve methodologieën en stimulusselectie vereist.
Niveaus van naturalisme in stimuli en experimentontwerp
Eerder werk in de experimentele psychologie en cognitieve neurowetenschappen heeft een breed scala aan stimuli gebruikt met verschillende niveaus van naturalisme26. De meeste onderzoekers geven de voorkeur aan statische afbeeldingen of korte dynamische video’s omdat deze stimuli gemakkelijker te bereiden zijn dan die welke een echte actie of een gebeurtenis kunnen simuleren. Ondanks dat ze voordelen hebben, stellen deze stimuli onderzoekers niet in staat om contingent gedrag te meten tussen sociale agenten. Met andere woorden, ze zijn niet handelbaar en hebben geen sociale affordance27. De afgelopen jaren is een alternatief voor deze niet-interactieve prikkels ontwikkeld: real-time animaties van virtuele avatars. Deze avatars maken het mogelijk om de interacties tussen avatars en hun gebruikers te onderzoeken. Het gebruik van virtuele avatars is echter onderhevig aan verminderde angst van gebruikers, vooral wanneer ze niet bijzonder aantrekkelijk lijken in termen van hun realistische en contingente gedrag26. Daarom is er nu meer interesse in het gebruik van echte sociale stimuli in experimentele studies. Hoewel hun ontwerp, gegevensregistratie en analyse mogelijk geavanceerde apparatuur en complexe gegevensanalyse vereisen, zijn ze de beste kandidaten voor het begrijpen van naturalistisch menselijk gedrag en cognitie.
De huidige studie stelt een methodologie voor voor het gebruik van real-life sociale stimuli in een laboratoriumomgeving. Deze studie heeft tot doel te onderzoeken hoe mensen de acties van anderen waarnemen en evalueren in een omgeving met een verbeterde ecologische validiteit in vergelijking met traditionele laboratoriumexperimenten. We hebben een nieuwe opstelling ontwikkeld en beschreven waarin deelnemers worden blootgesteld aan echte acteurs die fysiek aanwezig zijn en dezelfde omgeving met hen delen. In dit protocol worden de responstijden en muistrajecten van de deelnemers gemeten, wat een nauwkeurige timing van de presentatie van de stimuli en strikte controle over de experimentele omstandigheden in deze verbeterde ecologische omgeving vereist. Daarom onderscheidt het experimentele paradigma zich tussen de kaders die in de literatuur aanwezig zijn, omdat de natuurlijkheid van de stimuli wordt gemaximaliseerd zonder de controle over de omgeving op te offeren. Hieronder presenteert het protocol de stappen om een dergelijk systeem op te zetten en gaat vervolgens verder met de representatieve resultaten voor de steekproefgegevens. Ten slotte wordt een bespreking van de betekenis, beperkingen en plannen voor wijzigingen van het paradigma gepresenteerd.
Experimenteel ontwerp
Voordat we verder gaan met het protocolgedeelte, beschrijven we de parameters die in deze studie worden gebruikt en presenteren we de details van de stimuli samen met het experimentele ontwerp.
Parameters in het onderzoek
Deze studie heeft tot doel te meten hoe het type acteur en de klasse van acties die ze uitvoeren de waarnemingsprocessen van de geest van de deelnemers beïnvloeden. In het protocol wordt het waarnemingsproces van de geest gemeten in twee hoofddimensies, namelijk keuzevrijheid en ervaring, zoals voorgesteld door eerder onderzoek28. De hoge en lage uiteinden van deze twee dimensies zijn ook inbegrepen, zoals onlangs geïntroduceerd door Li et al.29.
De structuur van de studie is geïnspireerd op de single-category versie30 van de veelgebruikte implicit association task (IAT)31. In deze taak worden de responstijden van de deelnemers terwijl ze een attribuutconcept matchen met het doelconcept gebruikt als een indicatie van de kracht van hun impliciete associaties voor deze twee concepten. In de aanpassing van deze impliciete taak krijgen de deelnemers live acties te zien die worden uitgevoerd door echte acteurs en moeten ze matchen met doelconcepten. De doelconcepten zijn de hoge en lage uiteinden van het bureau of de ervaringsdimensies, afhankelijk van het blok van het experiment.
Samenvattend zijn de onafhankelijke variabelen Actor Type en Action Class. Actor Type heeft twee niveaus (d.w.z. twee verschillende acteurs, Actor1 en Actor2, die in de studie optreden). Action Class heeft twee niveaus: Action Class1 en Action Class2, en elke class bevat vier acties. De deelnemers evalueren de twee acteurs afzonderlijk in vier blokken (één acteur in elk blok) en in elk blok voeren de acteurs alle acties uit in een tegengestelde volgorde. De deelnemers voeren evaluaties uit met betrekking tot twee vooraf gedefinieerde en geforceerde dimensies: Agency en Experience. De vier blokken in het experiment zijn (1) Actor1 in Agency Block, (2) Actor2 in Agency Block, (3) Actor1 in Experience Block en (4) Actor2 di Experience Block. Ook wordt de volgorde van de blokken onder de deelnemers tegengesteld zodat de blokken met dezelfde agent elkaar nooit opvolgen.
Naast de antwoorden van de deelnemers worden de responstijden en de x-y-coördinaten van de draadloze muis die ze gebruiken terwijl ze naar een van de twee responsalternatieven gaan, vastgelegd. De afhankelijke variabelen zijn dus de respons en de responstijd (RT) van de deelnemers, evenals de metingen van de maximale afwijking (MD) en het gebied onder de curve (AUC), afgeleid van het volgen van de computermuis. De variabele respons is categorisch; het kan Hoog of Laag zijn, en aangezien de evaluaties in een van de gegeven blokken worden uitgevoerd, kunnen de antwoorden ook worden gelabeld als High-Agency, Low-Agency, High-Experience of Low-Experience. De responstijd is een continue variabele; De eenheid is seconden en verwijst naar de verstreken tijd tussen het begin van de presentatie van een actie en het optreden van een muisklik op een van de antwoordalternatieven. De MD van een traject is een continue variabele en verwijst naar de grootste loodrechte afwijking tussen het traject van de deelnemer(s) en het geïdealiseerde traject (rechte lijn). De AUC van een traject is ook een continue variabele en verwijst naar het geometrische gebied tussen het traject van de deelnemer(s) en het geïdealiseerde traject32.
Stimuli en opzet van het experiment
In deze studie wordt een experiment in drie fasen gebruikt. Voor de analyses worden de metingen uit het derde deel gebruikt; De eerste twee delen dienen als voorbereiding op het laatste deel. Hieronder beschrijven we elk deel van het experiment samen met de experimentele stimuli en hypothesen.
In Experiment Deel 1 (lexicaal trainingsgedeelte) voltooien de deelnemers een trainingssessie om de concepten van Agency en Experience en de capaciteitsniveaus weergegeven met de woorden High en Low te begrijpen. Om de concepten (n = 12) te selecteren die in deze trainingssessie moeten worden gebruikt, hebben enkele auteurs van het huidige werk een normatieve studieuitgevoerd 33. Aangezien de huidige studie gepland was om te worden uitgevoerd in de moedertaal van de deelnemers, werden de concepten ook vertaald in het Turks voordat ze werden genormaliseerd. Concepten werden geselecteerd uit degenen die sterk geassocieerd waren met de hoge (n = 3) en lage (n = 3) uiteinden van de twee dimensies (zes concepten voor elk). Dit deel is cruciaal omdat het begrip van de deelnemers van de concepten naar verwachting hun evaluatieprocessen zal begeleiden.
In experiment deel 2 (actie-identificatiedeel) bekijken deelnemers dezelfde acht acties die door Actor1 en Actor2 achter elkaar worden uitgevoerd en rapporteren ze wat de actie is aan de experimentator. Deze sectie dient als een manipulatiecontrole; Door alle acties te presenteren wanneer beide actoren ze uitvoeren, is het mogelijk om ervoor te zorgen dat de deelnemers de acties begrijpen en bekend zijn met de acteurs voordat ze aan de impliciete test beginnen, waar ze snelle evaluaties moeten maken. De acties die zijn geselecteerd voor Action Class1 en Action Class2 zijn die met de hoogste H-scores en betrouwbaarheidsniveaus (vier verschillende actievoorbeelden in elke actieklasse) volgens de resultaten van de twee normatieve studies (N = 219) voor elke actorconditie uitgevoerd door enkele van de auteurs (manuscript in voorbereiding). Alle acties worden uitgevoerd binnen een gelijke tijdsduur van 6 s.
Dit is een lopende studie en het heeft enkele andere componenten; De hypothesen voor de hierboven beschreven secties zijn echter als volgt: (i) het type actor zal de afhankelijke variabelen beïnvloeden; Actor2 levert langere RT’s, hogere MD’s en grotere AUC’s op in vergelijking met Actor1; ii) het soort actie is van invloed op de afhankelijke metingen; Action Class1 levert langere RT’s, hogere MD’s en grotere AUC’s op in vergelijking met Action Class2; (iii) de afhankelijke metingen voor hoge en lage responsen voor dezelfde actor en actieklasse verschillen tussen de blokdimensies: Agentschap en Ervaring.
Protocol
Representative Results
Discussion
Het overkoepelende doel van deze studie is om bij te dragen aan ons begrip van hoe menselijke visuele waarneming en cognitie op hoog niveau werken in real-life situaties. Deze studie richtte zich op actieperceptie en suggereerde een naturalistisch maar controleerbaar experimenteel paradigma dat onderzoekers in staat stelt om te testen hoe individuen de acties van anderen waarnemen en evalueren door echte actoren in een laboratoriumomgeving te presenteren.
Het belang van deze voorgestelde metho…
Divulgazioni
The authors have nothing to disclose.
Acknowledgements
Dit werk werd ondersteund door subsidies aan Burcu A. Urgen van de Wetenschappelijke en Technologische Onderzoeksraad van Türkiye (projectnummer: 120K913) en de Universiteit van Bilkent. We bedanken onze pilotdeelnemer Sena Er Elmas voor het brengen van het idee om achtergrondgeluid toe te voegen tussen de acteurswisselingen, Süleyman Akı voor het opzetten van het lichtcircuit en Tuvana Karaduman voor het idee om een beveiligingscamera backstage te gebruiken en haar bijdrage als een van de acteurs in de studie.
Materials
| Adjustable Height Table | Custom-made | N/A | Width: 60 cm, Height: 62 cm, Depth: 40 cm |
| Ardunio UNO | Smart Projects | A000066 | Microcontroller used for switching the state of the LEDs from the script running on the operator PC |
| Black Pants | No brand | N/A | Relaxed-fit pants of actors with no apparent brand name or logo. |
| Case | Xigmatek | EN43224 | XIGMATEK HELIOS RAINBOW LED USB 3.0 MidT ATX GAMING CASE |
| CPU | AMD | YD1600BBAFBOX | AMD Ryzen 5 1600 Soket AM4 3.2 GHz – 3.6 GHz 16 MB 65 W 12 nm Processor |
| Curtains | Custom-made | N/A | Width: Part 1: 110 cm width from the wall (left) side, Part 2: 123 cm width above OLED display, Part 3: 170 cm from OLED display to right side, Cabin depth: 100 cm, Inside cabin depth: 100 cm, all heights 230 cm except for Part 2 (75 cm height) |
| Experimenter Adjustable/Swivel Chair | No brand | N/A | Any brand |
| Experimenter Table | Custom | N/A | Width: 160 cm, Height: 75 cm, Depth: 80 cm |
| GPU | MSI | GT 1030 2GHD4 LP OC | MSI GEFORCE GT 1030 2GHD4 LP OC 2GB DDR4 64bit NVIDIA GPU |
| Grey-color blackout curtain | Custom-made | N/A | Width: 330 cm, Height: 230 cm, used for covering the background |
| Hard Disk | Kioxia | LTC10Z240GG8 | Kioxia 240 GB Exceria Sata 3.0 SSD (555 MB Read/540 MB Write) |
| Hard Disk | Toshiba | HDWK105UZSVA | Toshiba 2,5'' 500 GB L200 SATA 3.0 8 MB Cache 5400 Rpm 7 mm Harddisk |
| High-Power MOSFET Module | N/A | N/A | Heating Controller MKS MOSFET Module |
| Laptop | Apple | S/N: C02P916ZG3QT | MacBook Pro 11.1 Intel Core i7 (Used as the actor PC) |
| Laptop | Asus | UX410U | Used for monitoring the security camera in real-time. |
| LED lights | No brand | N/A | |
| LED Strip Power Supply | No brand | N/A | AC to DC voltage converter used for supplying DC voltage to the lighting circuit |
| MATLAB | The MathWorks Inc., Natick, MA, USA | Version: R2022a | Used for programming the experiment. Required Toolboxes: MATLAB Support Package for Arduino Hardware (version 22.1.2) Instrument Control Toolbox (version 4.6) Psychtoolbox (version 3) |
| Monitor | Philips | UHB2051005145 | Model ID: 242V8A/00, PHILIPS 23.8" 242V8A 4ms 75 Hz Freesync DP-HDMI+VGA IPS Gaming Monitor |
| Motherboard | MSI | B450M-A PRO MAX | MSI B450M-A PRO MAX Amd B450 Socket AM4 DDR4 3466(OC) M.2 Motherboard |
| Mouse Pad for participant | Monster | 78185721101502042 / 8699266781857 | Pusat Gaming Mouse Pad XL |
| Night lamp | Aukes | ES620-0.5W 6500K-IP 20 | Used for helping the actors see around when the lights are off in the backstage. |
| Participant Adjustable/Swivel Chair | No brand | N/A | |
| Participant Table | IKEA | Sandsberg 294.203.93 | Width: 110 cm, Height: 75 cm, Depth: 67 cm |
| Power Extension Cable | Viko | 9011760Y | 250 V (6 inlets) Black |
| Power Extension Cable | Viko | 9011730Y | 250 V (3 inlets) Black |
| Power Extension Cable | Viko | 9011330Y | 250 V (3 inlets) White |
| Power Extension Cable | s-link | Model No: SPG3-J-10 | AC – 250 V 3 meter (5 inlets) |
| Power Supply | THERMALTAKE | PS-LTP-0550NHSANE-1 | THERMALTAKE LITEPOWER RGB 550W APFC 12 cm FAN PSU |
| Professional Gaming Mouse | Rampage | 8680096 | Model No: SMX-R50 |
| RAM | GSKILL | F4-3000C16S-8GVRB | GSKILL 8GB (1x8GB) RipjawsV Red DDR4 3000 MHz CL16 1.35 V Single Ram |
| Reception bell | No brand | N/A | Used for helping the communication between the experimenter and the actors. |
| Security Camera | Brion Vega | 2-20204210 | Model:BV6000 |
| Speakers | Logitech | P/N: 880-000-405 PID: WD528XM | Used for playing the background music. |
| Survey Software | Qualtrics | N/A | |
| Switching Module | No brand | N/A | F5305S PMOS Switch Module |
| Table under the OLED display | Custom-made | N/A | Width: 123 cm, Height: 75 cm, Depth: 50 cm |
| Transparent OLED Display | Planar | PN: 998-1483-01 S/N:195210075 | A 55-inch transparent display that showcases dynamic information, enabled the opaque and transparent usage during the experiment. |
| UPS | EAG | K200610100087 | EAG 110 |
| UPS | EAG | 210312030507 | EAG 103 |
| USB 2.0 Cable Type A/B for Arduino UNO (Blue) | Smart Projects | M000006 | Used to connect the microcontroller to the experimenter PC. |
| USB to RS232 Converter | s-link | 8680096082559 | Model: SW-U610 |
| White Long-Sleeved Blouse (2) | H&M (cotton) | N/A | Relaxed-fit blouses with a round neckline and without ant apparent brand name or logo. |
| Wireless Keyboard | Logitech | P/N: 820-003488 S/N: 1719CE0856D8 | Model: K360 |
| Wireless Mouse | Logitech | S/N: 2147LZ96BGQ9 | Model: M190 (Used as the response device) |
Riferimenti
- Grossman, E. D., Blake, R. Brain areas active during visual perception of biological motion. Neuron. 35 (6), 1167-1175 (2002).
- Saygin, A. P. Superior temporal and premotor brain areas necessary for biological motion perception. Brain. 130 (9), 2452-2461 (2007).
- Peelen, M. V., Downing, P. E. The neural basis of visual body perception. Nature Reviews Neuroscience. 8 (8), 636-648 (2007).
- Caspers, S., Zilles, K., Laird, A. R., Eickhoff, S. B. ALE meta-analysis of action observation and imitation in the human brain. Neuroimage. 50 (3), 1148-1167 (2010).
- Nelissen, K., et al. Action observation circuits in the macaque monkey cortex. Journal of Neuroscience. 31 (10), 3743-3756 (2011).
- Oosterhof, N. N., Tipper, S. P., Downing, P. E. Crossmodal and action-specific: Neuroimaging the human mirror neuron system. Trends in Cognitive Sciences. 17 (7), 311-318 (2013).
- Lingnau, A., Downing, P. E. The lateral occipitotemporal cortex in action. Trends in Cognitive Sciences. 19 (5), 268-277 (2015).
- Giese, M. A., Rizzolatti, G. Neural and computational mechanisms of action processing: Interaction between visual and motor representations. Neuron. 88 (1), 167-180 (2015).
- Tucciarelli, R., Wurm, M., Baccolo, E., Lingnau, A. The representational space of observed actions. eLife. 8, e47686 (2019).
- Tarhan, L., Konkle, T. Sociality and interaction envelope organize visual action representations. Nature Communications. 11 (1), 3002 (2020).
- Urgen, B. A., Saygin, A. P. Predictive processing account of action perception: Evidence from effective connectivity in the action observation network. Cortex. 128, 132-142 (2020).
- Newen, A., De Bruin, L., Gallagher, S. . The Oxford Handbook of 4E Cognition. , (2018).
- Snow, J. C., Culham, J. C. The treachery of images: How realism influences brain and behavior. Trends in Cognitive Sciences. 25 (6), 506-519 (2021).
- Matusz, P. J., Dikker, S., Huth, A. G., Perrodin, C. Are we ready for real-world neuroscience. Journal of Cognitive Neuroscience. 31 (3), 327-338 (2019).
- Zaki, J., Ochsner, K. The need for a cognitive neuroscience of naturalistic social cognition. Annals of the New York Academy of Sciences. 1167 (1), 16-30 (2009).
- Hasson, U., Honey, C. J. Future trends in Neuroimaging: Neural processes as expressed within real-life contexts. NeuroImage. 62 (2), 1272-1278 (2012).
- Risko, E. F., Laidlaw, K. E., Freeth, M., Foulsham, T., Kingstone, A. Social attention with real versus reel stimuli: toward an empirical approach to concerns about ecological validity. Frontiers in Human Neuroscience. 6, 143 (2012).
- Parsons, T. D. Virtual reality for enhanced ecological validity and experimental control in the clinical, affective and social neurosciences. Frontiers in Human Neuroscience. 9, 660 (2015).
- Deuse, L., et al. Neural correlates of naturalistic social cognition: brain-behavior relationships in healthy adults. Social Cognitive and Affective Neuroscience. 11 (11), 1741-1751 (2016).
- Camerer, C., Mobbs, D. Differences in behavior and brain activity during hypothetical and real choices. Trends in Cognitive Sciences. 21 (1), 46-56 (2017).
- Nastase, S. A., Goldstein, A., Hasson, U. Keep it real: Rethinking the primacy of experimental control in cognitive neuroscience. NeuroImage. 222, 117254 (2020).
- Kihlstrom, J. F. Ecological validity and "ecological validity". Perspectives on Psychological Science. 16 (2), 466-471 (2021).
- Brunswik, E. . Perception and the Representative Design of Psychological Experiments. , (1956).
- Aronson, E., Carlsmith, J. M., Gilbert, D. T., Fiske, S. T., Lindzay, G. Experimentation in social psychology. The Handbook of Social Psychology. , 1-79 (1968).
- Ecological validity: Then and now. University of Colorado Available from: https://www.albany.edu/cpr/brunswik/notes/essay1.html (1998)
- Fan, S., Dal Monte, O., Chang, S. W. Levels of naturalism in social neuroscience research. IScience. 24 (7), 102702 (2021).
- Orban, G. A., Lanzilotto, M., Bonini, L. From observed action identity to social affordances. Trends in Cognitive Sciences. 25 (6), 493-505 (2021).
- Gray, H. M., Gray, K., Wegner, D. M. Dimensions of mind perception. Science. 315 (5812), 619 (2007).
- Li, Z., Terfurth, L., Woller, J. P., Wiese, E. Mind the machines: Applying implicit measures of mind perception to social robotics. 2022 17th ACM/IEEE International Conference on Human-Robot Interaction (HRI. , 236-245 (2022).
- Karpinski, A., Steinman, R. B. The single category implicit association test as a measure of implicit social cognition. Journal of Personality and Social Psychology. 91 (1), 16 (2006).
- Greenwald, A. G., McGhee, D. E., Schwartz, J. L. Measuring individual differences in implicit cognition: the implicit association test. Journal of Personality and Social Psychology. 74 (6), 1464 (1998).
- Freeman, J. B., Ambady, N. MouseTracker: Software for studying real-time mental processing using a computer mouse-tracking method. Behavior Research Methods. 42 (1), 226-241 (2010).
- Pekçetin, T. N., Barinal, B., Tunç, J., Acarturk, C., Urgen, B. A. Studying mind perception in social robotics implicitly: The need for validation and norming. Proceedings of the 2023 ACM/IEEE International Conference on Human-Robot Interaction. , 202-210 (2023).
- Yu, Z., Wang, F., Wang, D., Bastin, M. Beyond reaction times: Incorporating mouse-tracking measures into the implicit association test to examine its underlying process. Social Cognition. 30 (3), 289-306 (2012).
- Romero, C. A., Snow, J. C. Methods for presenting real-world objects under controlled laboratory conditions. Journal of Visualized Experiments. (148), e59762 (2019).
- Jastorff, J., Abdollahi, R. O., Fasano, F., Orban, G. A. Seeing biological actions in 3 D: An f MRI study. Human Brain Mapping. 37 (1), 203-219 (2016).
- Ferri, S., Pauwels, K., Rizzolatti, G., Orban, G. A. Stereoscopically observing manipulative actions. Cerebral Cortex. 26 (8), 3591-3610 (2016).
- Stangl, M., Maoz, S. L., Suthana, N. Mobile cognition: Imaging the human brain in the ‘real world. Nature Reviews Neuroscience. 24 (6), 347-362 (2023).
- Kriegeskorte, N. Deep neural networks: a new framework for modeling biological vision and brain information processing. Annual Review of Vision Science. 1, 417-446 (2015).
- Marblestone, A. H., Wayne, G., Kording, K. P. Toward an integration of deep learning and neuroscience. Frontiers in Computational Neuroscience. 10, 94 (2016).
