Summary

Utforsker bruken av isolerte uttrykk og Film Clips å evaluere Emotion Anerkjennelse av mennesker med traumatisk hjerneskade

Published: May 15, 2016
doi:

Summary

Denne artikkelen beskriver hvordan du implementerer et batteri av atferdsmessige oppgaver å undersøke følelser anerkjennelse av isolerte ansikts- og stemme følelser uttrykk, og en ny oppgave ved hjelp av kommersielle TV- og filmklipp å vurdere multimodale følelser anerkjennelse som inkluderer kontekstuelle signaler.

Abstract

Den aktuelle studien presenteres 60 personer med traumatisk hjerneskade (TBI) og 60 kontroller med isolerte ansikts følelser uttrykk, isolerte vokale følelser uttrykk, og multimodale (ie., Filmklipp) stimuli som inkluderte kontekstuelle signaler. Alle stimuli ble presentert via datamaskinen. Deltakerne ble pålagt å indikere hvordan personen i hvert stimulus var følelsen ved hjelp av en tvungen-choice format. I tillegg til filmklipp, måtte deltakerne indikere hvordan de følte seg som respons på stimuli, og nivået av intensitet som de opplevde at følelser.

Introduction

Traumatisk hjerneskade (TBI) rammer rundt 10 millioner mennesker hvert år over hele verden en. Etter TBI, evnen til å gjenkjenne følelser hos andre som bruker verbale signaler som ansikts- og stemmeuttrykk (ie., Tonen i stemmen), og kontekstuelle signaler, er ofte betydelig kompromittert 2-7. Siden vellykkede mellommenneskelig samhandling og kvalitet relasjoner er minst delvis avhengig av nøyaktig tolkning av andres følelser 7-10, er det ikke overraskende at problemer med følelser anerkjennelse har blitt rapportert å bidra til de dårlige sosiale utfall vanligst rapporterte følgende TBI 3,8, 11,12.

Studier som undersøker følelser gjenkjennelse av personer med TBI har hatt en tendens til å fokusere på isolerte signaler, særlig anerkjennelse av ansikts følelser uttrykk ved hjelp av statiske bilder 2. Mens dette arbeidet har vært viktig for å informere utviklingen av behandling program, betyr det ikke tilstrekkelig representere ens evne til å gjenkjenne og tolke ikke-verbale signaler av følelser i hverdagslige interaksjoner. Ikke bare statiske bilder gir økt tid til å tolke følelser portrettert, de også vanligvis bare skildre apex (ie., Maksimum representasjon) av uttrykkene 13-16. I tillegg statiske bilder mangler de timelige signaler som oppstår med bevegelse 12,13,15, og er ikke representative for de raskt skiftende ansiktsuttrykk av følelser som oppstår i hverdagslige situasjoner. Videre er det bevis som tyder på at statiske og dynamiske visuelle uttrykk er behandlet i ulike områder av hjernen, med mer nøyaktige svar på dynamisk stimuli 17-24.

Vocal følelser gjenkjennelse av personer med TBI har også blitt studert, både med og uten meningsfylt verbal innhold. Det har vært antydet at nærværet av verbal innhold øker perseptuelle krav fordi nøyaktig interpretation krever samtidig behandling av nonverbal tone med semantisk innhold inkludert i verbal melding 25. Mens mange studier har vist forbedret gjenkjennelse av vokal påvirke i fravær av meningsfylt verbal innhold, Dimoska et al. 25 var det ingen forskjell i ytelse. De hevder at personer med TBI har en bias mot semantisk innhold i affektive setninger; så selv når innholdet er semantisk nøytral eller eliminert, fortsetter de å fokusere på muntlig informasjon i setningen. Dermed deres resultater ikke klart vise om meningsfylt verbal innhold hjelper eller hindrer vokal følelser uttrykk.

I tillegg til det meningsfylt verbal innhold som kan følge de verbale vokale signaler, er sammenhengen også gitt gjennom den sosiale situasjonen selv. Situasjons sammenheng gir bakgrunnsinformasjon om de omstendighetene som følelser uttrykket ble produsert og kan dermed i stor grad iFluence tolkningen av uttrykket. Når man skal vurdere hvordan noen er følelsen, bruker vi kontekst for å finne ut om situasjonen er konsistent med at personens ønsker og forventninger. Det siste instans påvirker hvordan noen føler, så kunnskap om situasjons sammenheng bør resultere i mer nøyaktig inferencing av andres følelser 26. Evnen til å gjøre dette er referert til som teori tilstand, en konstruksjon funnet å være betydelig svekket etter TBI 6,27-31. Milders et al. 8,31 rapporten at personer med TBI har betydelige problemer med å gjøre nøyaktig dommer om og forstå intensjoner og følelser av tegn i korte historier.

Selv om disse studiene har markert underskudd i nonverbal og situasjons følelser behandling, er det vanskelig å generalisere resultatene til jobbhverdagen hvor disse stikkordene oppstå ved siden av hverandre, og i en sosial sammenheng. For bedre å forstå hvordan menneskermed TBI tolke følelser i jobbhverdagen, må vi bruke stimuli som er multimodal i naturen. Bare to tidligere studier har tatt multimodale stimuli som en del av etterforskningen i hvordan personer med TBI prosess følelser signaler. McDonald og Saunders 15 og Williams og Wood 16 hentet stimuli fra Emotion Evaluering Test (EET), som er en del av bevisstheten om Social Inference Test 26. Den EET består av filmet vignetter som viser mannlige og kvinnelige skuespillere portretterer verbale følelser signaler mens engasjerende i samtalen. Den verbale innholdet i samtalene er semantisk nøytral; pekepinner om hvordan skuespillerne føler og kontekstuell informasjon er ikke gitt. Dermed blir behovet for å behandle og integrere meningsfylt verbal innhold samtidig gjør dette med de ikke-verbale ansikts- og stemme signaler ble eliminert. Resultatene fra disse studiene viste at personer med TBI var significantly mindre nøyaktig enn kontrollene i deres evne til å identifisere følelser fra multimodale stimuli. Da verken studie vurderes påvirkning av semantisk eller kontekstuell informasjon om tolkning av følelser uttrykk, er det fortsatt uklart hvorvidt tilsetning av denne typen informasjon ville forenkle behandlingen på grunn av økt intersensory redundans eller negativt påvirke oppfatning på grunn av økte kognitive krav.

Denne artikkelen beskriver et sett med oppgaver som brukes til å sammenligne oppfatning av ansikts- og stemme emosjonelle signaler i isolasjon, og oppfatning av disse stikkordene som forekommer samtidig innenfor meningssituasjons sammenheng. De isoleringer oppgaver er en del av en større test av nonverbal følelser anerkjennelse – Diagnose Analyse av Nonverbal Nøyaktighet 2 (DANVA2) 32. I denne protokollen, brukte vi den voksne Faces (DANVA-ansikter) og Voksen paralanguage (DANVA-Voices) deltestene. Hver av disse deltestene omfatter 24 stimuli,viser seks forestillinger hver av glade, triste, sinte, og engstelig følelser. Den DANVA2 krever deltakerne til å identifisere følelser skildret ved hjelp av en tvungen-choice format (4 valg). Her er en femte alternativ (jeg vet ikke) gitt for begge deltestene. Tiden hvert ansiktsuttrykk ble vist ble økt fra to sekunder til fem sekunder for å sikre at vi var å vurdere påvirke anerkjennelse og ikke hastigheten på behandlingen. Vi endret ikke voksen paralanguage subtest utover å legge til ekstra valg i den tvungne-valget respons format. Deltakerne hørt hver setning bare én gang. Tilbakemelding ble ikke oppgitt i enten oppgave.

Filmklipp ble brukt for å vurdere oppfatning av ansikts- og stemme følelser signaler som opptrer samtidig innenfor situasjons sammenheng. Mens det verbale innholdet i disse klippene ikke eksplisitt hva karakterene i klippene var følelsen, det var meningsfylt å situational sammenheng. Femten klipp hentet fra commercial filmer og TV-serien ble inkludert i studien, hver spenner 45-103 (gjennomsnitt = 71,87) sekunder. Tilbakemelding ble ikke gitt til deltakerne i løpet av denne oppgaven. Det var tre klipp som representerer hver av følgende følelser kategorier: glad, trist, sint, redd, nøytral. Disse klippene ble valgt basert på resultater fra en studie utført blant unge voksne (n = 70) Zupan, B. & Babbage, DR Emotion utløsning stimuli fra filmklipp og fortellende tekst. Manuskript sendes til J Soc Psyc. I denne studien ble deltakerne presentert med seks filmklipp for hver av de mål følelser kategorier, og seks nøytrale filmklipp, alt fra 24 til 127 sekunder (gjennomsnitt = 77,3 sekunder). Mens målet var å inkludere relativt korte filmklipp, hvert klipp valgt for inkludering nødvendig å ha tilstrekkelig kontekstuell informasjon som det kan bli forstått av seerne uten ytterligere kunnskaper i filmen som det ble tatt 33.

<p class = "jove_content"> Klippene er valgt for denne studien hadde vært korrekt identifisert i Zupan og Babbage studie Emotion utløsning stimuli fra filmklipp og fortellende tekst, sitert ovenfor som målet følelser mellom 83 og 89% for happy, 86-93 % for trist, 63-93% for sint, 77-96% for engstelig, og 81-87% for nøytral. Samtidig ha samme antall eksemplarer av hver følelser kategori som var i DANVA2 oppgaver (n = 6) ville vært ideelt, valgte vi bare tre på grunn av økt lengden på filmklippet stimuli i forhold til stimuli i DANVA-Faces og DANVA-Voices oppgaver.

Data fra disse oppgavene ble samlet inn fra 60 deltakere med TBI og 60 alder og kjønn matchet kontroller. Deltakerne ble sett enten individuelt eller i små grupper (maks = 3) og rekkefølgen av de tre oppgavene ble randomisert tvers testing økter.

Protocol

Denne protokollen ble godkjent av institusjonelle gjennomgang styrene ved Brock University og ved Carolinas Rehabilitering. 1. Før Testing Lag 3 separate lister for de 15 filmsnutter, hver notering klippene i en annen begrenset rekkefølge. Sørg for at hver liste begynner og slutter med en nøytral stimulus, og at ingen to klipp som er rettet mot de samme følelser oppstår etter hverandre. Opprett en egen mappe på skrivebordet for hver liste av film for pre…

Representative Results

Denne oppgaven batteriet ble brukt til å sammenligne følelser anerkjennelse for isolerte følelser uttrykk (dvs. ansikt-bare;. Voice-only) og kombinerte følelser uttrykk (. Dvs. ansikt og stemme) som forekommer innenfor et situasjons sammenheng. Totalt 60 (37 hanner og 23 hunner) deltakere med moderat til alvorlig TBI mellom 21 og 63 år (gjennomsnitt = 40.98) og 60 (38 hanner og 22 hunner) alder -matched Controls (område = 18-63; mener = 40,64) fullførte de tre op…

Discussion

Manuskriptet beskriver tre oppgaver brukes til å vurdere følelser anerkjennelse evner til personer med TBI. Målet med den beskrevne metoden var å sammenligne svar nøyaktighet for ansikts- og stemme emosjonelle signaler isolert til oppfatningen av disse stikkordene som forekommer samtidig innenfor meningssituasjons sammenheng. Filmklipp ble inkludert i studien fordi deres tilnærming til dagligdagse situasjoner gjort dem mer økologisk gyldig enn isolerte fremstillinger av følelser uttrykk. Ved gjennomføring av de…

Divulgazioni

The authors have nothing to disclose.

Acknowledgements

This work was supported by the Humanities Research Institute at Brock University in St. Catharines, Ontario, Canada and by the Cannon Research Center at Carolinas Rehabilitation in Charlotte, North Carolina, USA.

Materials

Diagnostic Analysis of Nonverbal Accuracy-2 Department of Pychology, Emory University. Atlanta, GA DANVA-Faces subtest, DANVA-Voices subtest
Computer Apple iMac Desktop, 27" display
Statistical Analysis Software SPSS University Licensed software for data analysis
Happy Film Clip 1 Sweet Home Alabama, D&D Films, 2002, Director: A Tennant A man surprises his girlfriend by proposing in a jewelry store
Happy Film Clip 2 Wedding Crashers, New Line Cinema, 2005, Director: D. Dobkin A couple is sitting on the beach and flirting while playing a hand game
Happy Film Clip 3 Reme-mber the Titans, Jerry Bruckheimer Films, 2000, Director: B. Yakin An African American football coach and his family are accepted by their community when the school team wins the football championship
Sad Film Clip 1 Grey's Anatomy, ABC, 2006, Director: P. Horton A father is only able to communicate with his family using his eyes. 
Sad Film Clip 2 Armageddon, Touchstone Pictures, 1998, Director: M. Bay A daughter is saying goodbye to her father who is in space on a dangerous mission
Sad Film Clip 3 Grey's Anatomy, ABC, 2006, Director: M. Tinker A woman is heartbroken her fiance has died
Angry Film Clip 1 Anne of Green Gables, Canadian Broadcast Corporation, 1985, Director: K. Sullivan An older woman speaks openly about a child's physical appearance in front of her
Angry Film Clip 2 Enough, Columbia Pictures, 2002, Director: M. Apted A wife confronts her husband about an affair when she smells another woman's perfume on his clothing
Angry Film Clip 3 Pretty Woman, Touchstone Pictures, 1990, Director: G. Marshall A call girl attempts to purchase clothing in an expensive boutique and is turned away
Fearful Film Clip 1 Blood Diamond, Warner Bros Pictures, 2006, Director: E. Zwick Numerous vehicles carrying militia approach a man and his son while they are out walking
Fearful Film Clip 2 The Life Before Her Eyes, 2929 Productions, 2007, Directors: V. Perelman Two teenaged gilrs are talking in the school bathroom when they hear gunshots that continue to get closer
Fearful Film Clip 3 The Sixth Sense, Barry Mendel Productions, 1999, Director: M. N. Shyamalan A young boy enters the kitchen in the middle of the night and finds his mother behaving very atypically
Neutral Film Clip 1 The Other Sister, Mandeville Films, 1999, Director: G. Marshall A mother and daughter are discussing an art book while sitting in their living room
Neutral Film Clip 2 The Game, Polygram Filmed Entertainment, 1999, Director: D. Fincher One gentleman is explaining the rules of a game to another
Neutral Film Clip 3 The Notebook, New Line Cinema, 2004, Director: N. Cassavetes An older gentleman and his doctor are conversing during a routine check-up

Riferimenti

  1. Langlois, J., Rutland-Brown, W., Wald, M. The epidemiology and impact of traumatic brain injury: A brief overview. J. Head Trauma Rehabil. 21 (5), 375-378 (2006).
  2. Babbage, D. R., Yim, J., Zupan, B., Neumann, D., Tomita, M. R., Willer, B. Meta-analysis of facial affect recognition difficulties after traumatic brain injury. Neuropsychology. 25 (3), 277-285 (2011).
  3. Neumann, D., Zupan, B., Tomita, M., Willer, B. Training emotional processing in persons with brain injury. J. Head Trauma Rehabil. 24, 313-323 (2009).
  4. Bornhofen, C., McDonald, S. Treating deficits in emotion perception following traumatic brain injury. Neuropsychol Rehabil. 18 (1), 22-44 (2008).
  5. Zupan, B., Neumann, D., Babbage, D. R., Willer, B. The importance of vocal affect to bimodal processing of emotion: implications for individuals with traumatic brain injury. J Commun Disord. 42 (1), 1-17 (2009).
  6. Bibby, H., McDonald, S. Theory of mind after traumatic brain injury. Neuropsychologia. 43 (1), 99-114 (2005).
  7. Ferstl, E. C., Rinck, M., von Cramon, D. Y. Emotional and temporal aspects of situation model processing during text comprehension: an event-related fMRI study. J. Cogn. Neurosci. 17 (5), 724-739 (2005).
  8. Milders, M., Fuchs, S., Crawford, J. R. Neuropsychological impairments and changes in emotional and social behaviour following severe traumatic brain injury. J. Clin. Exp. Neuropsychol. 25 (2), 157-172 (2003).
  9. Spikman, J., Milders, M., Visser-Keizer, A., Westerhof-Evers, H., Herben-Dekker, M., van der Naalt, J. Deficits in facial emotion recognition indicate behavioral changes and impaired self-awareness after moderate to severe tramatic brain injury. PloS One. 8 (6), e65581 (2013).
  10. Zupan, B., Neumann, D. Affect Recognition in Traumatic Brain Injury: Responses to Unimodal and Multimodal Media. J. Head Trauma Rehabil. 29 (4), E1-E12 (2013).
  11. Radice-Neumann, D., Zupan, B., Babbage, D. R., Willer, B. Overview of impaired facial affect recognition in persons with traumatic brain injury. Brain Inj. 21 (8), 807-816 (2007).
  12. McDonald, S. Are You Crying or Laughing? Emotion Recognition Deficits After Severe Traumatic Brain Injury. Brain Impair. 6 (01), 56-67 (2005).
  13. Cunningham, D. W., Wallraven, C. Dynamic information for the recognition of conversational expressions. J. Vis. 9 (13), 1-17 (2009).
  14. Elfenbein, H. A., Marsh, A. A., Ambady, W. I. N. Emotional Intelligence and the Recognition of Emotion from Facid Expressions. The Wisdom in Feeling: Psychological Processes in Emotional Intelligence. , 37-59 (2002).
  15. McDonald, S., Saunders, J. C. Differential impairment in recognition of emotion across different media in people with severe traumatic brain injury. J. Int Neuropsycho. Soc. : JINS. 11 (4), 392-399 (2005).
  16. Williams, C., Wood, R. L. Impairment in the recognition of emotion across different media following traumatic brain injury. J. Clin. Exp. Neuropsychol. 32 (2), 113-122 (2010).
  17. Adolphs, R., Tranel, D., Damasio, A. R. Dissociable neural systems for recognizing emotions. Brain Cogn. 52 (1), 61-69 (2003).
  18. Biele, C., Grabowska, A. Sex differences in perception of emotion intensity in dynamic and static facial expressions. Exp. Brain Res. 171, 1-6 (2006).
  19. Collignon, O., Girard, S., et al. Audio-visual integration of emotion expression. Brain Res. 1242, 126-135 (2008).
  20. LaBar, K. S., Crupain, M. J., Voyvodic, J. T., McCarthy, G. Dynamic perception of facial affect and identity in the human brain. Cereb. Cortex. 13 (10), 1023-1033 (2003).
  21. Mayes, A. K., Pipingas, A., Silberstein, R. B., Johnston, P. Steady state visually evoked potential correlates of static and dynamic emotional face processing. Brain Topogr. 22 (3), 145-157 (2009).
  22. Sato, W., Yoshikawa, S. Enhanced Experience of Emotional Arousal in Response to Dynamic Facial Expressions. J. Nonverbal Behav. 31 (2), 119-135 (2007).
  23. Schulz, J., Pilz, K. S. Natural facial motion enhances cortical responses to faces. Exp. Brain Res. 194 (3), 465-475 (2009).
  24. O’Toole, A., Roark, D., Abdi, H. Recognizing moving faces: A psychological and neural synthesis. Trends Cogn. Sci. 6 (6), 261-266 (2002).
  25. Dimoska, A., McDonald, S., Pell, M. C., Tate, R. L., James, C. M. Recognizing vocal expressions of emotion in patients with social skills deficits following traumatic brain injury. J. Int. Neuropsyco. Soc.: JINS. 16 (2), 369-382 (2010).
  26. McDonald, S., Flanagan, S., Rollins, J., Kinch, J. TASIT: A new clinical tool for assessing social perception after traumatic brain injury. J. Head Trauma Rehab. 18 (3), 219-238 (2003).
  27. Channon, S., Pellijeff, A., Rule, A. Social cognition after head injury: sarcasm and theory of mind. Brain Lang. 93 (2), 123-134 (2005).
  28. Henry, J. D., Phillips, L. H., Crawford, J. R., Theodorou, G., Summers, F. Cognitive and psychosocial correlates of alexithymia following traumatic brain injury. Neuropsychologia. 44 (1), 62-72 (2006).
  29. Martìn-Rodrìguez, J. F., Leòn-Carriòn, J. Theory of mind deficits in patients with acquired brain injury: a quantitative review. Neuropsychologia. 48 (5), 1181-1191 (2010).
  30. McDonald, S., Flanagan, S. Social perception deficits after traumatic brain injury: interaction between emotion recognition, mentalizing ability, and social communication. Neuropsychology. 18 (3), 572-579 (2004).
  31. Milders, M., Ietswaart, M., Crawford, J. R., Currie, D. Impairments in theory of mind shortly after traumatic brain injury and at 1-year follow-up. Neuropsychology. 20 (4), 400-408 (2006).
  32. Nowicki, S. . The Manual for the Receptive Tests of the Diagnostic Analysis of Nonverbal Accuracy 2 (DANVA2). , (2008).
  33. Gross, J. J., Levenson, R. W. Emotion Elicitation Using Films. Cogn. Emot. 9 (1), 87-108 (1995).
  34. Spell, L. A., Frank, E. Recognition of Nonverbal Communication of Affect Following Traumatic Brain Injury. J. Nonverbal Behav. 24 (4), 285-300 (2000).
  35. Edgar, C., McRorie, M., Sneddon, I. Emotional intelligence, personality and the decoding of non-verbal expressions of emotion. Pers. Ind. Dif. 52, 295-300 (2012).
  36. Nowicki, S., Mitchell, J. Accuracy in Identifying Affect in Child and Adult Faces and Voices and Social Competence in Preschool Children. Genet. Soc. Gen. Psychol. 124 (1), (1998).
  37. Astesano, C., Besson, M., Alter, K. Brain potentials during semantic and prosodic processing in French. Cogn. Brain Res. 18, 172-184 (2004).
  38. Kotz, S. A., Paulmann, S. When emotional prosody and semantics dance cheek to cheek: ERP evidence. Brain Res. 115, 107-118 (2007).
  39. Paulmann, S., Pell, M. D., Kotz, S. How aging affects the recognition of emotional speech. Brain Lang. 104 (3), 262-269 (2008).
  40. Pell, M. D., Jaywant, A., Monetta, L., Kotz, S. A. Emotional speech processing: disentangling the effects of prosody and semantic cues. Cogn. Emot. 25 (5), 834-853 (2011).
  41. Bänziger, T., Scherer, K. R. Using Actor Portrayals to Systematically Study Multimodal Emotion Expression: The GEMEP Corpus. Affective Computing and Intelligent Interaction, LNCS 4738. , 476-487 (2007).
  42. Busselle, R., Bilandzic, H. Fictionality and Perceived Realism in Experiencing Stories: A Model of Narrative Comprehension and Engagement. Commun. Theory. 18 (2), 255-280 (2008).
  43. Zagalo, N., Barker, A., Branco, V. Story reaction structures to emotion detection. Proceedings of the 1st ACM Work. Story Represent. Mech. Context – SRMC. 04, 33-38 (2004).
  44. Hagemann, D., Naumann, E., Maier, S., Becker, G., Lurken, A., Bartussek, D. The Assessment of Affective Reactivity Using Films: Validity, Reliability and Sex Differences. Pers. Ind. Dif. 26, 627-639 (1999).
  45. Hewig, J., Hagemann, D., Seifert, J., Gollwitzer, M., Naumann, E., Bartussek, D. Brief Report. A revised film set for the induction of basic emotions. Cogn. Emot. 19 (7), 1095-1109 (2005).
  46. Wranik, T., Scherer, K. R. Why Do I Get Angry? A Componential Appraisal Approach. International Handbook of Anger. , 243-266 (2010).
  47. Neumann, D., Zupan, B., Malec, J. F., Hammond, F. M. Relationships between alexithymia, affect recognition, and empathy after traumatic brain injury. J. Head Trauma Rehabil. 29 (1), E18-E27 (2013).
  48. Russell, J. A. Is there universal recognition of emotion from facial expression? A review of the cross-cultural studies. Psychol. Bull. 115 (1), 102-141 (1994).
check_url/it/53774?article_type=t

Play Video

Citazione di questo articolo
Zupan, B., Neumann, D. Exploring the Use of Isolated Expressions and Film Clips to Evaluate Emotion Recognition by People with Traumatic Brain Injury. J. Vis. Exp. (111), e53774, doi:10.3791/53774 (2016).

View Video