Summary

Karakterisering af følelse af agenturet over handlinger af neurale-machine Interface-drives proteser

Published: January 07, 2019
doi:

Summary

Her præsenterer vi en protokol, der præger følelsen af agenturet udviklet kontrol over sensate virtuelle eller robot proteser hænder. Psykofysiske spørgeskemaer er ansat til at fange den eksplicitte oplevelse af agenturet, og interval estimater (forsætlig bindende) er ansat til implicit måle følelsen af agenturet.

Abstract

Dette arbejde beskriver en metodisk ramme, som kan bruges til eksplicit og implicit karakterisere følelse af agenturet udviklet neurale-maskine-interface (NMI) kontrol over sensate virtuelle eller robot proteser hænder. Dannelsen af agenturet er grundlæggende skelne de handlinger, vi udfører med vores lemmer som værende vores egne. Ved at stræbe at indarbejde avancerede øvre lemmer proteser i disse samme perceptuelle mekanismer, kan vi begynde at integrere en kunstige lemmer tættere i brugerens eksisterende kognitive rammer for lemmer kontrol. Dette har stor betydning for at fremme brugernes accept, anvendelse og effektiv kontrol af avancerede øvre lemmer proteser. I denne protokol, deltagerne styre en virtuel proteser hånd og modtage kinæstetisk sensoriske feedback gennem deres allerede eksisterende NMIs. En række virtuelle grasping opgaver udføres og perturbationer introduceres systematisk kinæstetisk feedback og virtuelle håndbevægelser. To separate foranstaltninger i agenturet er ansat: etableret psykofysiske spørgeskemaer (til at fange den eksplicitte oplevelse af agenturet) og en gang interval beregne opgave for at fange den implicitte følelse af agenturet (forsætlig bindende). Resultaterne af denne protokol (spørgeskema scores og tidsinterval anslår) kan analyseres for at opgøre omfanget af agenturet dannelse.

Introduction

Som robot proteser bliver stadig mere avanceret, vil betydningen af relevante sensoriske feedback fortsætte med at vokse. Sensorisk feedback påvirker hvordan mennesker opfatter, interagere med og endda integrere maskiner til deres krop skema. Seneste NMI teknikker kan nu levere protese lemmer brugere med intuitiv kontrol og opnå fornemmelser knyttet touch1,2,3,4,5,6 , 7 og kinesthesia (bevægelse forstand)8,9 i manglende lemmer. Når disse sensoriske oplysninger er parret med visuelle oplysninger ved at se de kunstige lemmer under drift, vi har adgang til centrale elementer, der underretter skelnen af self –versus-andre. Udnytte denne adgang kan hjælpe med at bringe protese lemmer brugere et skridt tættere på at operere en kunstige lemmer som en del af deres krop, snarere end blot et værktøj.

Kropsbevidsthed og følelsen af at være inkarneret skyldes oprettelsen af agenturet (oplevelse af forfatterskab over en legemsdel handlinger) og ejerskab (følelsen af, at en legemsdel er en del af kroppen)10,11. Ejerskab er primært medieres gennem integration af touch og visuel information12. Agenturet fremgår af integrationen af hensigtserklæringer, bevægelse sensation (kinesthesia), visuel information og kognitive prognosemodeller11. Under udførelsen af en frivillig indsats, er agenturet dannet når de sensoriske konsekvenser af handlingen justere med kunstnerens hensigt og forudsigelser fra kunstnerens interne modeller13. Agenturet er adskilte og forskellige fra ejerskab. Begrebet lemmer ejerskab er blevet undersøgt ofte i protesen litteratur14. En følelse af lemmer ejerformer i NMI deltagerne når touch feedback er rumligt og tidsligt passende som målte udtrykkeligt via spørgeskemaer eller implicit resterende lemmer temperaturforandringer, eller tidsmæssige rækkefølge domme15. Imidlertid har færre muligheder eksisteret for at udforske agenturet i forbindelse med NMI16. Seneste arbejde med NMI deltagere har vist, at agenturet kan fremmes målrettet og er adskilt fra oplevelsen af ejerskab8.

Agenturet er særligt vigtige efter operation af robot proteser, da det er en kognitiv link til kontrol af den kunstige lemmer fysiske handlinger gennem oplevelser af kausalitet, følelsen af kontrollere de kunstige lemmer eller forårsager noget at ske17. Robot proteser er avancerede edb maskiner, som brugeren skal samarbejde med til effektivt udføre opgaver. Nogle protese lemmer har indarbejdet autonome funktioner, såsom greb-slip afsløring og korrektion; men disse systemer har set begrænset vedtagelse som funktionerne kører brugerens kontrol kan ses så frustrerende hvis ikke korrekt gennemført8,18. Dette er en grundlæggende udfordring, der går igen i hele anvendelser af menneskelige samarbejde med autonome maskiner. Det vil sige mennesker har ofte tillid til deres egne handlinger over dem som følge af et samarbejde med computere eller maskiner, og denne tillid påvirker direkte luftfartsforetagendets sandsynligheden for at bruge de autonome funktioner19,20. Som mennesker stole vi medfødt på os selv og vores kroppe for at udføre de handlinger, vi har til hensigt; Når dette er opnået, opretter vi en iboende følelse af agenturet. Interessant, er dannelsen af agenturet påvirket i menneske-computer samarbejdsaktioner. Under menneske-menneske kooperative opgaver, kan en fælles følelse af agenturet dannes over bevægelse21; endnu, litteraturen tyder på, at delte agentur er belastet under menneske-computer samarbejde22,23. Disse udfordringer er afspejlet i proteser øvre lemmer brug, og afvisning satser for robotic enheder forbliver høje, med 23% – 39% af brugerne ophørende deres brug24. I virkeligheden, foretrækker mange protesen brugere stadig kroppen-drevne systemer25. Disse systemer fjerne edb maskinen fra kontrol loop og mere par intimt brugerens krop bevægelse til protesen bevægelse via wire kabler. Dette forstærker yderligere vigtigheden af kognitive integration i brugen af avanceret prosthetic enheder. Vi foreslår at NMI systemer kan give et antal af de nødvendige sensoriske og motoriske stykker til at hjælpe med at flytte kunstige lemmer tættere til oprettelse af et kooperativt følelse af agenturet, og dette vil være medvirkende til at fremme accept og den ægte integration af disse edb maskiner med deres brugere.

Agenturet kan måles i en række forskellige måder. De enkleste foranstaltninger anvendes psykofysiske spørgeskemaer eller skalaer der udtrykkeligt spørge deltagerne til hvem eller hvad de tilskriver en begivenhed17,26,27. Dette beror på en persons eksisterende opfattelse af “selv” ved at kræve deltagere at gøre inferential domme af selvstændig attribution (dvs., at udtrykkeligt bedømme, om “I” eller en anden enhed var ansvarlig for en handling eller en begivenhed). Implicitte foranstaltninger giver indblik i baggrunden kognitive processer, der opstår under motor action og sensoriske begivenheder. Denne opfattelse af agenturet forsøger at måle det, der ikke opfattes udtrykkeligt af en individuel. Dette opnås typisk ved at have deltagere karakterisere opfattede forskel i self – og eksternt-genererede handlinger, for eksempel at have deltagerne rapport varighed af de opfattes som opstår mellem en self – og eksternt-genereret begivenhed 17 , 28. under udførelsen af selvstændige genereret handlinger, agenturet implicit manifesterer sig som en sanselig kompression i tid mellem handlinger og konsekvenserne heraf sensoriske, kendt som forsætlig bindende28. Når individer rapporterer tid de opfattes som opstår mellem en handling og dens resultat, svarer en kortere opfattede varighed til en kraftigere dannede følelse af agenturet29,30. Interessant, er det blevet påvist, at eksplicitte og implicitte foranstaltninger direkte ikke kan korrelere som de sandsynligvis karakterisere forskellige perceptuelle mekanismer17 , sammen informere følelse af agenturet. Som sådan, vil om oprettelse af en mere omfattende forståelse af agenturet dannelse under protesen brug sandsynligvis kræve eksperimentelle protokoller beskæftiger både eksplicitte og implicitte foranstaltninger.

Dette arbejde beskriver en metodisk ramme, som kan bruges til eksplicit og implicit karakterisere følelse af agenturet udviklet NMI kontrol over sensate virtuelle eller robot proteser hænder. To teknikker til at måle agenturet under udførelsen af en sensorimotor objekt-fatte opgave er fremhævet. Etablerede psykofysiske spørgeskemaer er ansat til at fange den eksplicitte oplevelse af agenturet, mens intervallet estimater (forsætlig bindende) er ansat til implicit måle følelsen af agenturet.

Anvendelsesområdet for denne protokol er at vurdere følelsen af agenturet i forbindelse med en NMI, der giver fysiologisk relevante aktive motorisk kontrol og kinæstetisk feedback. Disse teknikker er generaliserbart til virtuelle eller fysiske proteser NMI systemer. Der er minimal restriktioner på de befolkninger, der kan ansættes til at udføre denne protokol. For eksempel mobilitet af deltagerens øvre lemmer kan ikke være bilateralt påvirket (de skal have en forsvarlig lemmer), og de skal besidde den kognitive evne til at gøre tidsbaserede domme og formulere erfarne fornemmelser.

Protocol

Denne protokol har tidligere godkendt og følger retningslinjerne i Cleveland Clinic menneskelige videnskabsetisk Komité. 1. hardware og Software af NMI Etablere enkelte individuelle deltageres NMI kontrol og feedback, så at når de forsøger at udføre en bevægelse, de ser og føler en virtuel protesen fuldføre denne bevægelse. Generere en hånd kinæstetisk percept gennem deltagerens NMI og fange kinematik opfattede forslaget ved at have deltageren dokumentere, hvad de…

Representative Results

En eksperimentel protokol blev udført med tre amputeret deltagere opererer en sensate virtuelle protesen via deres NMI8 (figur 1). Opsætningen brugt en deltager-styrbar virtuelle hånd bevæger sig gennem forprogrammerede kinematiske profiler ved hjælp af MuJoCo HAPTIX fysik motor31. Den virtuelle side blev vist på en vandret skærm foran deltagere på en placering rumligt kongruent med deres mangle…

Discussion

Her præsenteres en metodisk ramme for at karakterisere oplevelsen af agenturet dannede samtidig opererer sensate proteser via NMIs. I forbindelse er agenturet især relevant som det broer fysisk handling til de kognitive baggrundsprocesser at forme opfattelsen. Gennem en deltagers protesen og NMI, vi har direkte adgang til en række centrale elementer, der etablerer følelsen af agenturet: hensigtserklæringer, motor output og bevægelse sensation. Af betydning for avancerede protese lemmer kontrol, de værktø…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Forfatterne vil gerne takke Madeline Newcomb for hendes bidrag til figur generation. Dette arbejde blev finansieret af amerikanske skatteydere gennem en NIH, for direktøren, fælles fond, Transformative R01 Research Award (grant #1R01NS081710-01) og Defense Advanced Research Projects Agency (kontrakt antal N66001-15-C-4015 regi Biologi teknologi Office program manager D. Weber).

Materials

LabVIEW 2015, Service Pack 1, Version 15.0.1f2 64-bit National Instruments, Austin, TX, USA Full or Pro Version We wrote custom software in LabVIEW to coordinate virtual prosthesis control with kinesthetic feedback as well as to present experimental conditions and record data.
8-Slot, USB CompactDAQ Chassis National Instruments, Austin, TX, USA cDAQ-9178
±60 V, 800 kS/s, 12-Bit, 8-Channel C Series Voltage Input Module National Instruments, Austin, TX, USA NI-9221
100 kS/s/ch Simultaneous, ±10 V, 4-Channel C Series Voltage Output Module National Instruments, Austin, TX, USA NI-9263
Custom Wearable Kinesthetic Tactor HDT Global, Solon, OH, USA N/A This item was custom made. Other methods of delivering kinesthetic feedback are acceptable as long as the participant feels the sensation of the hand moving in real-time with the movements of the virtual hand.
MuJoCo Physics Engine, HAPTIX Version Roboti LLC, Redmond, WA, USA mjhaptix150 Newer versions of MuJoCo should be acceptable as well. We used the MPL Gripper Model.
Myobock Electrodes, powered by Otto Bock EnergyPack in MyoBoy Battery Receptacle Ottobock, Duderstadt, Germany electrodes: 13E200=60
battery: 757B21
battery receptacle: 757Z191=2
Any setup that provides an amplified, filtered, and rectified EMG or neural control signal could be used.

References

  1. Kuiken, T. A., Marasco, P. D., Lock, B. A., Harden, R. N., Dewald, J. P. A. Redirection of cutaneous sensation from the hand to the chest skin of human amputees with targeted reinnervation. Proceedings of the National Academy of Sciences. 104 (50), 20061-20066 (2007).
  2. Hebert, J. S., et al. Novel targeted sensory reinnervation technique to restore functional hand sensation after transhumeral amputation. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 22 (4), 765-773 (2014).
  3. Tan, D. W., et al. A neural interface provides long-term stable natural touch perception. Science Translational Medicine. 257 (6), (2014).
  4. Oddo, C. M., et al. Intraneural stimulation elicits discrimination of textural features by artificial fingertip in intact and amputee humans. eLife. 5 (MARCH2016), (2016).
  5. Raspopovic, S., et al. Bioengineering: Restoring natural sensory feedback in real-time bidirectional hand prostheses. Science Translational Medicine. 6 (222), (2014).
  6. Flesher, S. N., et al. Intracortical microstimulation of human somatosensory cortex. Science Translational Medicine. 8 (361), (2016).
  7. Tabot, G. A., et al. Restoring the sense of touch with a prosthetic hand through a brain interface. Proceedings of the National Academy of Sciences. 110 (45), 18279-18284 (2013).
  8. Marasco, P. D., et al. Illusory movement perception improves motor control for prosthetic hands. Science Translational Medicine. 10 (432), (2018).
  9. Horch, K., Meek, S., Taylor, T. G., Hutchinson, D. T. Object discrimination with an artificial hand using electrical stimulation of peripheral tactile and proprioceptive pathways with intrafascicular electrodes. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 19 (5), 483-489 (2011).
  10. Braun, N., et al. The senses of agency and ownership: A review. Frontiers in Psychology. 9 (APR), (2018).
  11. Van Den Bos, E., Jeannerod, M. Sense of body and sense of action both contribute to self-recognition. Cognition. 85 (2), 177-187 (2002).
  12. Botvinick, M., Cohen, J. Rubber hands "feel" touch that eyes see. Nature. 391 (6669), 756 (1998).
  13. Gallagher, S. Philosophical conceptions of the self: Implications for cognitive science. Trends in Cognitive Sciences. 4 (1), 14-21 (2000).
  14. Niedernhuber, M., Barone, D. G., Lenggenhager, B. Prostheses as extensions of the body: Progress and challenges. Neuroscience & Biobehavioral Reviews. 92, 1-6 (2018).
  15. Marasco, P. D., Kim, K., Colgate, J. E., Peshkin, M. A., Kuiken, T. A. Robotic touch shifts perception of embodiment to a prosthesis in targeted reinnervation amputees. Brain. 134 (3), 747-758 (2011).
  16. Rognini, G., Blanke, O. Cognetics: Robotic Interfaces for the Conscious Mind. Trends in Cognitive Sciences. 20 (3), 162-164 (2016).
  17. Dewey, J. A., Knoblich, G. Do implicit and explicit measures of the sense of agency measure the same thing. PLoS ONE. 9 (10), (2014).
  18. Edwards, A. L. . Adaptive and Autonomous Switching: Shared Control of Powered Prosthetic Arms Using Reinforcement Learning. , (2016).
  19. Desai, M., Stubbs, K., Steinfeld, A., Yanco, H. Creating trustworthy robots: Lessons and inspirations from automated systems. Adaptive and Emergent Behaviour and Complex Systems – Proceedings of the 23rd Convention of the Society for the Study of Artificial Intelligence and Simulation of Behaviour, AISB 2009. , 49-56 (2009).
  20. Lee, J. D., See, K. A. Trust in automation: designing for appropriate reliance. Human Factors. 46 (1), 50-80 (2004).
  21. Moore, J. W. What is the sense of agency and why does it matter?. Frontiers in Psychology. 7 (AUG), 1-9 (2016).
  22. Obhi, S. S., Hall, P. Sense of agency in joint action: Influence of human and computer co-actors. Experimental Brain Research. 211 (3-4), 663-670 (2011).
  23. Sahaï, A., Pacherie, E., Grynszpan, O., Berberian, B. Co-representation of human-generated actions vs. machine-generated actions: Impact on our sense of we-Agency?. 2017 26th IEEE International Symposium on Robot and Human Interactive Communication (RO-MAN). , (2017).
  24. Biddiss, E., Chau, T. Upper limb prosthesis use and abandonment: A survey of the last 25 years. Prosthetics and Orthotics International. 31 (3), 236-257 (2007).
  25. Atkins, D. J., Heard, D. C. Y., Donovan, W. H. Epidemiologic overview of individuals with upper-limb loss and their reported research priorities. Journal of Prosthetics and Orthotics. 8 (1), 2-11 (1996).
  26. Kalckert, A., Ehrsson, H. H. Moving a Rubber Hand that Feels Like Your Own: A Dissociation of Ownership and Agency. Frontiers in Human Neuroscience. 6 (March), 1-14 (2012).
  27. Caspar, E. A., Cleeremans, A., Haggard, P. The relationship between human agency and embodiment. Consciousness and Cognition. 33, 226-236 (2015).
  28. Haggard, P., Clark, S., Kalogeras, J. Voluntary action and conscious awareness. Nature Neuroscience. 5 (4), 382-385 (2002).
  29. Engbert, K., Wohlschläger, A., Haggard, P. Who is causing what? The sense of agency is relational and efferent-triggered. Cognition. 107 (2), 693-704 (2008).
  30. Moore, J. W., Wegner, D. M., Haggard, P. Modulating the sense of agency with external cues. Consciousness and Cognition. 18 (4), 1056-1064 (2009).
  31. Kumar, V., Todorov, E. MuJoCo HAPTIX: A virtual reality system for hand manipulation. 2015 IEEE-RAS 15th International Conference on Humanoid Robots (Humanoids). , (2015).
  32. Kuiken, T. A., et al. Targeted reinnervation for enhanced prosthetic arm function in a woman with a proximal amputation: a case study. Lancet. 369 (9559), 371-380 (2007).
check_url/58702?article_type=t

Play Video

Cite This Article
Schofield, J. S., Shell, C. E., Thumser, Z. C., Beckler, D. T., Nataraj, R., Marasco, P. D. Characterization of the Sense of Agency over the Actions of Neural-machine Interface-operated Prostheses. J. Vis. Exp. (143), e58702, doi:10.3791/58702 (2019).

View Video