Summary

Utforska användningen av isolerade uttryck och Filmklipp att utvärdera känslor erkännande av personer med traumatisk hjärnskada

Published: May 15, 2016
doi:

Summary

Detta dokument beskriver hur man genomför ett batteri av beteende uppgifter att undersöka känslor erkännande av isolerade ansikts- och vokala känslor uttryck, och en ny uppgift med hjälp av kommersiella TV och filmklipp för att bedöma multimodal känslor erkännande som innehåller kontextuella ledtrådar.

Abstract

Den aktuella studien presenteras 60 personer med traumatisk hjärnskada (TBI) och 60 kontroller med isolerade ansiktssinnesuttryck, isolerade vokala känslor uttryck, och multimodal (dvs., Filmklipp) stimuli som ingår kontextuella ledtrådar. Alla stimuli presenterades via dator. Deltagarna var tvungna att ange hur personen i varje stimulus kände användning av en forcerad val format. Dessutom, för filmklipp, var man tvungen att ange hur de kände sig som svar på stimulans, och graden av intensitet med vilken de upplevde den känslan.

Introduction

Traumatisk hjärnskada (TBI) berör cirka 10 miljoner människor varje år i hela världen en. Efter TBI, förmågan att känna igen känslor i andra som använder icke-verbala signaler som ansikts och vokala uttryck (dvs., Tonfall), och kontextuella ledtrådar är ofta betydligt äventyras 2-7. Eftersom framgångsrika mellanmänskliga interaktioner och kvalitet relationer är åtminstone delvis beroende av korrekt tolkning av andras känslor 7-10, är det inte förvånande att svårigheter med känslor erkännande har rapporterats att bidra till dåliga sociala resultaten vanligaste rapporterade efter TBI 3,8, 11,12.

Studier som undersöker känslor erkännande av personer med TBI har tenderat att fokusera på enstaka ledtrådar, särskilt erkännande av ansiktssinnesuttryck som använder statiska bilder 2. Även om detta arbete har varit viktigt att informera utveckling av behandlings program, inte fullgott sätt representera det en förmåga att känna igen och tolka icke-verbala signaler av känslor i vardagliga interaktioner. Inte bara statiska bilder ger ökad tid för att tolka känslor skildras de också oftast bara skildra spetsen (dvs., Maximal representation) av uttrycken 13-16. Dessutom, statiska bilder saknar tids ledtrådar som uppstår med rörelse 12,13,15, och är inte representativa för de snabbt föränderliga ansiktsuttryck av känslor som uppstått i vardagliga situationer. Vidare finns det bevis som tyder på att statiska och dynamiska visuella uttryck behandlas i olika områden i hjärnan, med mer exakta svar på dynamiska stimuli 17-24.

Vocal emotion erkännande av personer med TBI har också undersökts, både med och utan meningsfull verbal innehåll. Det har föreslagits att närvaron av verbala innehåll ökar perceptuella krav eftersom exakt Interpretation kräver samtidig behandling av icke-verbal röst med det semantiska innehållet i den verbala budskap 25. Även om många studier har visat förbättrat erkännande av sång påverkar i avsaknad av menings verbal innehåll, Dimoska et al. 25 fann ingen skillnad i prestanda. De hävdar att personer med TBI har en bias mot semantisk innehåll i affektiva meningar; så även när innehållet är semantiskt neutrala eller elimineras, fortsätter de att fokusera på muntlig information i meningen. Således gjorde resultaten inte klart visa om menings verbalt innehåll hjälper eller hindrar sång sinnesrörelse.

Förutom meningsfull verbala innehåll som kan följa med icke-verbala sång ledtrådar är sammanhang även genom den sociala situationen själv. Situations sammanhang ger bakgrundsinformation om de omständigheter under vilka sinnesrörelse producerades och kan således mycket iinflytande tolkningen av uttrycket. Vid bedömningen av hur någon mår, använder vi sammanhang för att avgöra om den situationen är förenlig med den personens önskemål och förväntningar. Detta påverkar i slutändan hur någon känner, så kunskap om situations sammanhang bör resultera i mer noggrann inferencing av andras känslor 26. Förmågan att göra detta kallas theory of mind, en konstruktion visade sig vara signifikant försämrad efter TBI 6,27-31. Milders et al. 8,31 rapport att personer med TBI har betydande svårigheter att göra korrekta bedömningar om och förstå avsikter och känslor av tecken i korthet berättelser.

Även om dessa studier har visat underskott i icke-verbal och situationsanpassat känsla behandling, är det svårt att generalisera resultaten till vardags sociala interaktioner där dessa signaler uppträder bredvid varandra och i ett socialt sammanhang. För att bättre förstå hur människormed TBI tolkar känslor i vardagliga sociala interaktioner, måste vi använda stimuli som är multimodal till sin natur. Endast två tidigare studier har inkluderat multimodala stimuli som en del av sin undersökning i hur människor med TBI process känslor ledtrådar. McDonald och Saunders 15 och Williams och Wood 16 extraherade stimuli från Emotion Evaluation Test (EET), som är en del av medvetenheten om sociala Inference Test 26. EET består av videoinspelade vinjetter som visar manliga och kvinnliga skådespelare porträtterar icke-verbala känslor signaler samtidigt bedriva samtal. Den verbala innehållet i samtalen är semantiskt neutral; ledtrådar om hur skådespelarna mår och bakgrundsinformation ges inte. Således, behovet bearbeta och integrera meningsfull verbal innehåll samtidigt gör detta med icke-verbala ansikts- och vokala ledtrådar blev utslagen. Resultaten av dessa studier visade att personer med TBI var significantly mindre exakt än kontroller i deras förmåga att identifiera känslor från multimodala stimuli. Eftersom varken studie anses påverkan av semantisk eller kontextuell information om tolkningen av känslor uttryck, är det fortfarande oklart om tillsättning av denna typ av information skulle underlätta behandlingen på grund av ökad intersensory redundans eller negativt påverka synen på grund av ökade kognitiva krav.

Den här artikeln beskriver en uppsättning av uppgifter som används för att jämföra synen på ansikts- och vokala känslomässiga signaler i isolering, och uppfattning om dessa signaler förekommer samtidigt inom meningsfull situations sammanhang. De isoleringar uppgifter är del av en större test av icke-verbal emotion igenkänning – Diagnostik Analys av icke-verbal Noggrannhet 2 (DANVA2) 32. I detta protokoll använde vi Vuxna Faces (DANVA-ansikten) och vuxna paralanguage (DANVA-ljud) deltester. Var och en av dessa deltester ingår 24 stimuli,skildrar sex representationer varje glad, ledsen, arg, och rädda känslor. Den DANVA2 föreskriver att deltagarna att identifiera känslor skildras med hjälp av en forcerad val format (4 val). Här är ett femte alternativ (jag vet inte) tillhandahålls för båda deltester. Den tid varje ansiktsuttryck visade ökades från två sekunder till fem sekunder för att säkerställa att vi bedömer att påverka redovisningen och inte bearbetningshastighet. Vi ändrade inte den vuxna paralanguage deltest utöver att lägga till ytterligare val i forcerad val svarsformat. Deltagarna hörde varje mening endast en gång. Feedback angavs inte i någon uppgift.

Filmklipp användes för att bedöma uppfattning om ansikts- och vokala känslor ledtrådar som förekommer samtidigt inom situationsanpassat sammanhang. Medan den verbala innehållet i dessa klipp inte uttryckligen vad karaktärerna i klippen kände, var det meningsfullt att situations sammanhanget. Femton klipp utvinns ur commercial filmer och TV-serier ingick i studien, var och en sträcker sig från 45 till 103 (medelvärde = 71,87) sekunder. Återkoppling inte ges till deltagare under denna uppgift. Det fanns tre clips som representerar var och en av följande känslor kategorier: glad, ledsen, arg, rädd, neutral. Dessa klipp valdes baserat på resultaten av en studie med unga vuxna (n = 70) Zupan, B. & Babbage, DR Emotion framtagning stimuli från filmklipp och berättande text. Manuskript inlämnat till J Soc Psyc. I denna studie fick deltagarna presenteras med sex filmklipp för varje mål känslor kategorier och sex neutrala filmklipp, som sträcker sig från 24 till 127 sekunder (medelvärde = 77,3 sekunder). Medan målet var att inkludera relativt korta filmklipp, varje vald för integration klipp behövde ha tillräcklig bakgrundsinformation som det kunde förstås av tittarna utan ytterligare kunskap om filmen från vilken den togs 33.

<p class = "jove_content"> Klippen som valts ut för den aktuella studien hade korrekt identifierats i Zupan och Babbage studie Emotion framtagning stimuli från filmklipp och berättande text ovannämnda som mål känslor mellan 83 och 89% för glad, 86-93 % för ledsen, 63-93% för arg, 77-96% för rädda, och 81 – 87% för neutral. Samtidigt med samma antal exemplar av varje känsla kategori som var i DANVA2 uppgifter (n = 6) skulle ha varit perfekt, valde vi bara tre på grund av den ökade längden av filmklipp stimuli jämfört med stimuli i DANVA-Faces och DANVA-voices uppgifter.

Data från dessa uppgifter samlades från 60 deltagare med TBI och 60 års ålder och kön matchade kontroller. Deltagarna sågs antingen individuellt eller i små grupper (max = 3) och ordningen av de tre uppgifter randomiserades över testsessioner.

Protocol

Detta protokoll godkändes av institutionella prövningsnämnder vid Brock University och vid Carolinas rehabilitering. 1. Innan testning Skapa 3 separata listor för de 15 filmklipp som listar klippen i en annan begränsad ordning. Se till att varje lista börjar och slutar med en neutral stimulans och att det inte finns två klipp som riktar sig mot samma känsla uppstår i följd. Skapa en separat mapp på skrivbordet för varje lista över film för present…

Representative Results

Denna uppgift batteri användes för att jämföra känslor erkännande för isolerade sinnesuttryck (dvs ansikte bara,. Enbart röst) och kombinerade känslor uttryck (. Dvs ansikte och röst) som inträffar under ett situationsanpassat sammanhang. Totalt 60 (37 män och 23 kvinnor) deltagarnas med måttlig till svår TBI i åldrarna 21 och 63 år (medelvärde = 40,98) och 60 (38 män och 22 kvinnor) ålder -matched Kontroller (intervall = 18-63; medelvärde = 40,64) a…

Discussion

Manuskriptet beskriver tre uppgifter används för att bedöma känslor erkännande förmågan hos människor med TBI. Målet för den beskrivna metoden var att jämföra svars noggrannhet för ansikts- och vokala känslomässiga signaler i isolering, till uppfattningen av dessa signaler uppträder samtidigt inom meningsfull situations sammanhang. Filmklipp ingick i den aktuella studien eftersom deras approximation av vardagliga situationer gjorde dem mer ekologiskt giltigt än enstaka representationer av känslor uttry…

Divulgazioni

The authors have nothing to disclose.

Acknowledgements

This work was supported by the Humanities Research Institute at Brock University in St. Catharines, Ontario, Canada and by the Cannon Research Center at Carolinas Rehabilitation in Charlotte, North Carolina, USA.

Materials

Diagnostic Analysis of Nonverbal Accuracy-2 Department of Pychology, Emory University. Atlanta, GA DANVA-Faces subtest, DANVA-Voices subtest
Computer Apple iMac Desktop, 27" display
Statistical Analysis Software SPSS University Licensed software for data analysis
Happy Film Clip 1 Sweet Home Alabama, D&D Films, 2002, Director: A Tennant A man surprises his girlfriend by proposing in a jewelry store
Happy Film Clip 2 Wedding Crashers, New Line Cinema, 2005, Director: D. Dobkin A couple is sitting on the beach and flirting while playing a hand game
Happy Film Clip 3 Reme-mber the Titans, Jerry Bruckheimer Films, 2000, Director: B. Yakin An African American football coach and his family are accepted by their community when the school team wins the football championship
Sad Film Clip 1 Grey's Anatomy, ABC, 2006, Director: P. Horton A father is only able to communicate with his family using his eyes. 
Sad Film Clip 2 Armageddon, Touchstone Pictures, 1998, Director: M. Bay A daughter is saying goodbye to her father who is in space on a dangerous mission
Sad Film Clip 3 Grey's Anatomy, ABC, 2006, Director: M. Tinker A woman is heartbroken her fiance has died
Angry Film Clip 1 Anne of Green Gables, Canadian Broadcast Corporation, 1985, Director: K. Sullivan An older woman speaks openly about a child's physical appearance in front of her
Angry Film Clip 2 Enough, Columbia Pictures, 2002, Director: M. Apted A wife confronts her husband about an affair when she smells another woman's perfume on his clothing
Angry Film Clip 3 Pretty Woman, Touchstone Pictures, 1990, Director: G. Marshall A call girl attempts to purchase clothing in an expensive boutique and is turned away
Fearful Film Clip 1 Blood Diamond, Warner Bros Pictures, 2006, Director: E. Zwick Numerous vehicles carrying militia approach a man and his son while they are out walking
Fearful Film Clip 2 The Life Before Her Eyes, 2929 Productions, 2007, Directors: V. Perelman Two teenaged gilrs are talking in the school bathroom when they hear gunshots that continue to get closer
Fearful Film Clip 3 The Sixth Sense, Barry Mendel Productions, 1999, Director: M. N. Shyamalan A young boy enters the kitchen in the middle of the night and finds his mother behaving very atypically
Neutral Film Clip 1 The Other Sister, Mandeville Films, 1999, Director: G. Marshall A mother and daughter are discussing an art book while sitting in their living room
Neutral Film Clip 2 The Game, Polygram Filmed Entertainment, 1999, Director: D. Fincher One gentleman is explaining the rules of a game to another
Neutral Film Clip 3 The Notebook, New Line Cinema, 2004, Director: N. Cassavetes An older gentleman and his doctor are conversing during a routine check-up

Riferimenti

  1. Langlois, J., Rutland-Brown, W., Wald, M. The epidemiology and impact of traumatic brain injury: A brief overview. J. Head Trauma Rehabil. 21 (5), 375-378 (2006).
  2. Babbage, D. R., Yim, J., Zupan, B., Neumann, D., Tomita, M. R., Willer, B. Meta-analysis of facial affect recognition difficulties after traumatic brain injury. Neuropsychology. 25 (3), 277-285 (2011).
  3. Neumann, D., Zupan, B., Tomita, M., Willer, B. Training emotional processing in persons with brain injury. J. Head Trauma Rehabil. 24, 313-323 (2009).
  4. Bornhofen, C., McDonald, S. Treating deficits in emotion perception following traumatic brain injury. Neuropsychol Rehabil. 18 (1), 22-44 (2008).
  5. Zupan, B., Neumann, D., Babbage, D. R., Willer, B. The importance of vocal affect to bimodal processing of emotion: implications for individuals with traumatic brain injury. J Commun Disord. 42 (1), 1-17 (2009).
  6. Bibby, H., McDonald, S. Theory of mind after traumatic brain injury. Neuropsychologia. 43 (1), 99-114 (2005).
  7. Ferstl, E. C., Rinck, M., von Cramon, D. Y. Emotional and temporal aspects of situation model processing during text comprehension: an event-related fMRI study. J. Cogn. Neurosci. 17 (5), 724-739 (2005).
  8. Milders, M., Fuchs, S., Crawford, J. R. Neuropsychological impairments and changes in emotional and social behaviour following severe traumatic brain injury. J. Clin. Exp. Neuropsychol. 25 (2), 157-172 (2003).
  9. Spikman, J., Milders, M., Visser-Keizer, A., Westerhof-Evers, H., Herben-Dekker, M., van der Naalt, J. Deficits in facial emotion recognition indicate behavioral changes and impaired self-awareness after moderate to severe tramatic brain injury. PloS One. 8 (6), e65581 (2013).
  10. Zupan, B., Neumann, D. Affect Recognition in Traumatic Brain Injury: Responses to Unimodal and Multimodal Media. J. Head Trauma Rehabil. 29 (4), E1-E12 (2013).
  11. Radice-Neumann, D., Zupan, B., Babbage, D. R., Willer, B. Overview of impaired facial affect recognition in persons with traumatic brain injury. Brain Inj. 21 (8), 807-816 (2007).
  12. McDonald, S. Are You Crying or Laughing? Emotion Recognition Deficits After Severe Traumatic Brain Injury. Brain Impair. 6 (01), 56-67 (2005).
  13. Cunningham, D. W., Wallraven, C. Dynamic information for the recognition of conversational expressions. J. Vis. 9 (13), 1-17 (2009).
  14. Elfenbein, H. A., Marsh, A. A., Ambady, W. I. N. Emotional Intelligence and the Recognition of Emotion from Facid Expressions. The Wisdom in Feeling: Psychological Processes in Emotional Intelligence. , 37-59 (2002).
  15. McDonald, S., Saunders, J. C. Differential impairment in recognition of emotion across different media in people with severe traumatic brain injury. J. Int Neuropsycho. Soc. : JINS. 11 (4), 392-399 (2005).
  16. Williams, C., Wood, R. L. Impairment in the recognition of emotion across different media following traumatic brain injury. J. Clin. Exp. Neuropsychol. 32 (2), 113-122 (2010).
  17. Adolphs, R., Tranel, D., Damasio, A. R. Dissociable neural systems for recognizing emotions. Brain Cogn. 52 (1), 61-69 (2003).
  18. Biele, C., Grabowska, A. Sex differences in perception of emotion intensity in dynamic and static facial expressions. Exp. Brain Res. 171, 1-6 (2006).
  19. Collignon, O., Girard, S., et al. Audio-visual integration of emotion expression. Brain Res. 1242, 126-135 (2008).
  20. LaBar, K. S., Crupain, M. J., Voyvodic, J. T., McCarthy, G. Dynamic perception of facial affect and identity in the human brain. Cereb. Cortex. 13 (10), 1023-1033 (2003).
  21. Mayes, A. K., Pipingas, A., Silberstein, R. B., Johnston, P. Steady state visually evoked potential correlates of static and dynamic emotional face processing. Brain Topogr. 22 (3), 145-157 (2009).
  22. Sato, W., Yoshikawa, S. Enhanced Experience of Emotional Arousal in Response to Dynamic Facial Expressions. J. Nonverbal Behav. 31 (2), 119-135 (2007).
  23. Schulz, J., Pilz, K. S. Natural facial motion enhances cortical responses to faces. Exp. Brain Res. 194 (3), 465-475 (2009).
  24. O’Toole, A., Roark, D., Abdi, H. Recognizing moving faces: A psychological and neural synthesis. Trends Cogn. Sci. 6 (6), 261-266 (2002).
  25. Dimoska, A., McDonald, S., Pell, M. C., Tate, R. L., James, C. M. Recognizing vocal expressions of emotion in patients with social skills deficits following traumatic brain injury. J. Int. Neuropsyco. Soc.: JINS. 16 (2), 369-382 (2010).
  26. McDonald, S., Flanagan, S., Rollins, J., Kinch, J. TASIT: A new clinical tool for assessing social perception after traumatic brain injury. J. Head Trauma Rehab. 18 (3), 219-238 (2003).
  27. Channon, S., Pellijeff, A., Rule, A. Social cognition after head injury: sarcasm and theory of mind. Brain Lang. 93 (2), 123-134 (2005).
  28. Henry, J. D., Phillips, L. H., Crawford, J. R., Theodorou, G., Summers, F. Cognitive and psychosocial correlates of alexithymia following traumatic brain injury. Neuropsychologia. 44 (1), 62-72 (2006).
  29. Martìn-Rodrìguez, J. F., Leòn-Carriòn, J. Theory of mind deficits in patients with acquired brain injury: a quantitative review. Neuropsychologia. 48 (5), 1181-1191 (2010).
  30. McDonald, S., Flanagan, S. Social perception deficits after traumatic brain injury: interaction between emotion recognition, mentalizing ability, and social communication. Neuropsychology. 18 (3), 572-579 (2004).
  31. Milders, M., Ietswaart, M., Crawford, J. R., Currie, D. Impairments in theory of mind shortly after traumatic brain injury and at 1-year follow-up. Neuropsychology. 20 (4), 400-408 (2006).
  32. Nowicki, S. . The Manual for the Receptive Tests of the Diagnostic Analysis of Nonverbal Accuracy 2 (DANVA2). , (2008).
  33. Gross, J. J., Levenson, R. W. Emotion Elicitation Using Films. Cogn. Emot. 9 (1), 87-108 (1995).
  34. Spell, L. A., Frank, E. Recognition of Nonverbal Communication of Affect Following Traumatic Brain Injury. J. Nonverbal Behav. 24 (4), 285-300 (2000).
  35. Edgar, C., McRorie, M., Sneddon, I. Emotional intelligence, personality and the decoding of non-verbal expressions of emotion. Pers. Ind. Dif. 52, 295-300 (2012).
  36. Nowicki, S., Mitchell, J. Accuracy in Identifying Affect in Child and Adult Faces and Voices and Social Competence in Preschool Children. Genet. Soc. Gen. Psychol. 124 (1), (1998).
  37. Astesano, C., Besson, M., Alter, K. Brain potentials during semantic and prosodic processing in French. Cogn. Brain Res. 18, 172-184 (2004).
  38. Kotz, S. A., Paulmann, S. When emotional prosody and semantics dance cheek to cheek: ERP evidence. Brain Res. 115, 107-118 (2007).
  39. Paulmann, S., Pell, M. D., Kotz, S. How aging affects the recognition of emotional speech. Brain Lang. 104 (3), 262-269 (2008).
  40. Pell, M. D., Jaywant, A., Monetta, L., Kotz, S. A. Emotional speech processing: disentangling the effects of prosody and semantic cues. Cogn. Emot. 25 (5), 834-853 (2011).
  41. Bänziger, T., Scherer, K. R. Using Actor Portrayals to Systematically Study Multimodal Emotion Expression: The GEMEP Corpus. Affective Computing and Intelligent Interaction, LNCS 4738. , 476-487 (2007).
  42. Busselle, R., Bilandzic, H. Fictionality and Perceived Realism in Experiencing Stories: A Model of Narrative Comprehension and Engagement. Commun. Theory. 18 (2), 255-280 (2008).
  43. Zagalo, N., Barker, A., Branco, V. Story reaction structures to emotion detection. Proceedings of the 1st ACM Work. Story Represent. Mech. Context – SRMC. 04, 33-38 (2004).
  44. Hagemann, D., Naumann, E., Maier, S., Becker, G., Lurken, A., Bartussek, D. The Assessment of Affective Reactivity Using Films: Validity, Reliability and Sex Differences. Pers. Ind. Dif. 26, 627-639 (1999).
  45. Hewig, J., Hagemann, D., Seifert, J., Gollwitzer, M., Naumann, E., Bartussek, D. Brief Report. A revised film set for the induction of basic emotions. Cogn. Emot. 19 (7), 1095-1109 (2005).
  46. Wranik, T., Scherer, K. R. Why Do I Get Angry? A Componential Appraisal Approach. International Handbook of Anger. , 243-266 (2010).
  47. Neumann, D., Zupan, B., Malec, J. F., Hammond, F. M. Relationships between alexithymia, affect recognition, and empathy after traumatic brain injury. J. Head Trauma Rehabil. 29 (1), E18-E27 (2013).
  48. Russell, J. A. Is there universal recognition of emotion from facial expression? A review of the cross-cultural studies. Psychol. Bull. 115 (1), 102-141 (1994).
check_url/it/53774?article_type=t

Play Video

Citazione di questo articolo
Zupan, B., Neumann, D. Exploring the Use of Isolated Expressions and Film Clips to Evaluate Emotion Recognition by People with Traumatic Brain Injury. J. Vis. Exp. (111), e53774, doi:10.3791/53774 (2016).

View Video