Summary

Karakteristikk av følelsen av byrået over handlingene til Neural-maskin-grensesnitt-opererte proteser

Published: January 07, 2019
doi:

Summary

Her presenterer vi en protokoll som preger følelsen av byrået utviklet over kontrollen av sensate virtuelle eller robotic protese hender. Psykofysiske spørreskjemaer er ansatt å fange eksplisitt opplevelsen av byrået, og intervallet estimater (tilsiktet bindende) er ansatt implisitt måle følelse av byrået.

Abstract

Dette verket beskriver en metodiske rammeverk som kan brukes til å eksplisitt og implisitt karakterisere følelsen av byrået utviklet over neural-maskin-grensesnitt (NMI) kontrollen sensate virtuelle eller robotic protese hender. Dannelsen av byrået er grunnleggende i atskillende handlingene som vi utfører med våre lemmer som våre egne. Ved å innlemme avanserte øvre lem proteser i disse samme perseptuell mekanismer, kan vi begynne å integrere en kunstig lem nærmere i brukerens eksisterende kognitive rammeverk for lem kontroll. Dette har viktige implikasjoner fremme brukeraksept, bruk og effektiv kontroll over avanserte øvre lem proteser. Denne protokollen, deltakerne kontrollere en virtuell kunstig hånd og motta kinestetiske sensorisk feedback gjennom sine eksisterende NMIs. En rekke virtuelle fatte oppgaver utføres og forstyrrelser introdusert systematisk til kinestetiske tilbakemeldinger og virtuelle håndbevegelser. To separate mål av byrået er ansatt: etablert psykofysiske spørreskjemaer (å fange eksplisitt opplevelsen av byrået) og et tidsintervall anslå oppgave å fange implisitt følelsen av byrået (tilsiktet bindende). Resultatene av denne protokollen (spørreskjema score og tidsintervallet anslår) kan analyseres for å kvantifisere omfanget av byrået formasjon.

Introduction

Så robotic proteser blitt stadig mer avansert, vil viktigheten av relevante sensorisk feedback fortsette å vokse. Sensorisk feedback påvirker hvordan mennesker oppfatter, samhandle med og selv integrere maskiner i kroppen skjema. Siste NMI teknikker kan gi protese lemmer brukerne intuitiv kontroll og oppnå opplevelser knyttet trykk1,,2,,3,,4,,5,,6 , 7 og kinesthesia (bevegelse forstand)8,9 i manglende lemmer. Når denne sensoriske informasjonen er sammenkoblet med visuelle informasjonen ved å se kunstig lem under drift, har vi tilgang til viktige elementer som informerer æren av selv –versus-andre. Å utnytte denne tilgangen kan bidra til å bringe protese lemmer brukere et skritt nærmere å opererer en kunstig lem som en del av kroppen, i stedet for bare et verktøy.

Kroppsbevissthet og følelse av å være nedfelt oppstår fra etableringen av byrået (en opplevelse av over en lem handlinger) og eierskap (følelsen av at en lem er en del av kroppen)10,11. Eierskap er hovedsakelig mediert gjennom integrering av touch og visuell informasjon12. Byrået framgår av integrering av hensikt, bevegelse sensasjon (kinesthesia), visuell informasjon og prediktiv kognitive modeller11. Under utførelsen av en frivillig handling, blir byrå dannet når sensoriske konsekvensene av handlingen justere med utøveren hensikt og spådommer fra utøveren interne modeller13. Agency er separat og distinkt fra eierskap. Begrepet lem eierskap har vært studert ofte i protese litteratur14. En følelse av lem eierskap skjemaer i NMI deltakere når touch tilbakemelding passer romlig og timelig, som målte eksplisitt gjennom spørreskjemaer eller implisitt gjennom endringer i gjenværende lemmet temperatur eller temporal dommer15. Imidlertid eksistert færre muligheter for å utforske byrå i sammenheng med NMI16. Nylige arbeider med NMI deltakere har vist at etaten kan fremmes målbevisst og er atskilt fra opplevelsen av eierskap8.

Byrået er spesielt viktig i driften av robot proteser som det er en kognitiv link til kontroll av kunstig lems fysiske handlinger gjennom erfaringer kausalitet, følelsen av kontrollere kunstig lem eller forårsaker noe skje17. Robotic protesene er avanserte datastyrt maskiner som brukeren må samarbeide med å effektivt fullføre oppgaver. Noen protese lemmer har innarbeidet autonome funksjoner, som grep-slip deteksjon og korrigering; men har disse systemene sett begrenset adopsjon som funksjonalitet kjører utenfor brukerens kontroll kan vises like frustrerende hvis ikke riktig implementert8,18. Dette gir en grunnleggende utfordring som er ekko gjennom programmer av menneskelig samarbeid med autonome maskiner. Det vil si mennesker stole ofte på sine egne handlinger over de som følge av et samarbeid med datamaskiner eller maskiner, og denne klareringen påvirker direkte en operatør er sannsynligheten for å bruke den autonome funksjoner19,20. Som mennesker stole vi innately på oss selv og våre organer for å utføre handlinger vil vi; Når dette er oppnådd, etablere vi en indre følelse av byrået. Interessant, er dannelsen av byrået påvirket i kooperativ menneske-maskin-handlinger. Under menneske-menneske samarbeidende aktiviteter, kan en felles oppfatning av byrået dannes over bevegelse21; Likevel, antyder litteraturen at delte etaten er beheftet under menneske-maskin samarbeid22,23. Disse utfordringene gjenspeiles i protese øvre lem bruk og avvisning utbredelsen av robotsveising enheter fortsatt høy, med 23% – 39% av brukerne nedlagte deres bruk24. Faktisk foretrekke mange protese brukernes fremdeles kroppen-powered systemer25. Disse systemene fjerne datastyrt maskinen fra kontroll sløyfen og mer par intimt brukerens kroppsbevegelse til protesen bevegelse via wire kabler. Dette ytterligere forsterker betydningen av kognitiv integrering i bruk av avansert protese enheter. Vi foreslår at NMI systemer kan gi en rekke nødvendige sensoriske og motor brikkene til å flytte kunstige lemmer nærmere til å etablere en felles følelse av byrået, og dette vil være medvirkende til å fremme aksept og sann integrering av disse datastyrt maskiner med brukerne.

Byrået kan måles på flere måter. De enkleste tiltakene bruker psykofysiske spørreskjemaer eller skalaer som eksplisitt be deltakerne hvem eller hva de attributtet en hendelse17,26,27. Dette er avhengig av en persons eksisterende oppfatning av “selvbetjening” ved å kreve deltakerne gjøre inferential dommer for selvstendig henvisning (dvs.å eksplisitt bedømme om “Jeg” eller en annen enhet var ansvarlig for en handling eller hendelse). Implisitt tiltak gir innsikt i bakgrunnen kognitive prosesser som oppstår under motor action og sensoriske hendelser. Denne visningen av byrået forsøker å måle som ikke eksplisitt oppfattes av en enkeltperson. Vanligvis gjøres dette ved at deltakerne karakterisere en oppfattet forskjell i selv – og eksternt-genererte handlinger, for eksempel at deltakerne rapportere tidsperioden de oppfattet oppstår mellom en selv og eksternt-genererte hendelsen 17 , 28. under utførelsen av selv-generert handlinger, byrået implisitt manifesterer seg som en perseptuell komprimering mellom handlinger og deres sensoriske konsekvenser, kjent som forsettlig bindende28. Når enkeltpersoner rapporterer tid de oppfattet oppstår mellom en handling og resultatet, tilsvarer kortere oppfattet tidsvarighet en sterkere dannet følelse av byrået29,30. Interessant, har det vært vist at eksplisitte og implisitte tiltak ikke kan direkte samsvarer som de er sannsynlig karakterisere ulike perseptuell mekanismer17 som sammen informere betydningen av byrået. Som sådan, vil å etablere en mer omfattende forståelse av byrået formasjon under protese bruk trolig kreve eksperimentelle protokoller ansette tydelig og umerkbar tiltak.

Dette verket beskriver en metodiske rammeverk som kan brukes til å eksplisitt og implisitt karakterisere følelsen av byrået utviklet over NMI kontrollen sensate virtuelle eller robotic protese hender. To teknikker å måle byrået under utførelsen av et sensorimotor objekt-fatte aktiviteten er uthevet. Etablerte psykofysiske spørreskjemaer er ansatt å fange eksplisitt opplevelsen av byrået, mens intervall estimater (tilsiktet bindende) er ansatt implisitt måle følelse av byrået.

Omfanget av denne protokollen er å evaluere følelsen av byrået i sammenheng med en NMI fysiologisk aktuelle aktiv motorstyring og kinestetisk tilbakemelding. Disse teknikkene er generalizable virtuelle eller fysiske protese NMI-systemer. Det er minimale begrensninger på bestander som kan bli rekruttert til å utføre denne protokollen. For eksempel mobilitet i deltakerens øvre lemmer bilateralt påvirkes ikke (de må ha en lyd lem), og de må ha kognitive muligheten til å gjøre tidsbaserte dommer og artikulere erfarne opplevelser.

Protocol

Denne protokollen er godkjent tidligere, og følger retningslinjene i Cleveland Clinics menneskelige forskning etikk. 1. maskinvare og programvare på NMI Opprette hver enkelt deltaker NMI kontroll og tilbakemelding slik at når de prøver å utføre en bevegelse, de ser og føler en virtuell protese fullføre denne bevegelsen. Generere en hånd kinestetiske percept gjennom deltakerens NMI og fange kinematikken av oppfattet bevegelsen ved å ha deltakeren viser hva de føler …

Representative Results

Eksperimentell protokollen ble utført med tre amputert deltakere opererer en sensate virtuelle protese via deres NMI8 (figur 1). Oppsettet brukes en deltaker kontrollerbare virtuelle hånden beveger seg gjennom forhåndsprogrammerte Kinematisk profiler som bruker MuJoCo HAPTIX fysikk motor31. Den virtuelle hånden ble vist på en horisontal skjerm foran deltakerne et sted romlig sammenfallende med dere…

Discussion

Her vises en metodiske rammeverk betegner opplevelsen av byrået dannet under drift sensate proteser via NMIs. I denne sammenheng er byrået særlig relevant som den bygger fysisk handling i bakgrunnen kognitive prosesser som forme oppfatning. Gjennom en deltakers protesen og NMI, vi har direkte tilgang til en rekke viktige elementer som etablerer følelsen av Byrået: hensikt og motoren bevegelse sensasjon. Viktig for avansert protese lemmer kontroll, verktøyene i dette arbeidet utnytte denne direkte tilgang f…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Forfatterne vil gjerne takke Madeline Newcomb for hennes bidrag til figur generasjon. Dette arbeidet ble finansiert av amerikanske skattebetalere gjennom en NIH, kontor, felles fondet, Transformative R01 forskning Award (stipend #1R01NS081710-01) og Defense Advanced Research Projects Agency (kontraktnummeret N66001-15-C-4015 i regi av Biologi teknologi Office program manager D. Weber).

Materials

LabVIEW 2015, Service Pack 1, Version 15.0.1f2 64-bit National Instruments, Austin, TX, USA Full or Pro Version We wrote custom software in LabVIEW to coordinate virtual prosthesis control with kinesthetic feedback as well as to present experimental conditions and record data.
8-Slot, USB CompactDAQ Chassis National Instruments, Austin, TX, USA cDAQ-9178
±60 V, 800 kS/s, 12-Bit, 8-Channel C Series Voltage Input Module National Instruments, Austin, TX, USA NI-9221
100 kS/s/ch Simultaneous, ±10 V, 4-Channel C Series Voltage Output Module National Instruments, Austin, TX, USA NI-9263
Custom Wearable Kinesthetic Tactor HDT Global, Solon, OH, USA N/A This item was custom made. Other methods of delivering kinesthetic feedback are acceptable as long as the participant feels the sensation of the hand moving in real-time with the movements of the virtual hand.
MuJoCo Physics Engine, HAPTIX Version Roboti LLC, Redmond, WA, USA mjhaptix150 Newer versions of MuJoCo should be acceptable as well. We used the MPL Gripper Model.
Myobock Electrodes, powered by Otto Bock EnergyPack in MyoBoy Battery Receptacle Ottobock, Duderstadt, Germany electrodes: 13E200=60
battery: 757B21
battery receptacle: 757Z191=2
Any setup that provides an amplified, filtered, and rectified EMG or neural control signal could be used.

References

  1. Kuiken, T. A., Marasco, P. D., Lock, B. A., Harden, R. N., Dewald, J. P. A. Redirection of cutaneous sensation from the hand to the chest skin of human amputees with targeted reinnervation. Proceedings of the National Academy of Sciences. 104 (50), 20061-20066 (2007).
  2. Hebert, J. S., et al. Novel targeted sensory reinnervation technique to restore functional hand sensation after transhumeral amputation. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 22 (4), 765-773 (2014).
  3. Tan, D. W., et al. A neural interface provides long-term stable natural touch perception. Science Translational Medicine. 257 (6), (2014).
  4. Oddo, C. M., et al. Intraneural stimulation elicits discrimination of textural features by artificial fingertip in intact and amputee humans. eLife. 5 (MARCH2016), (2016).
  5. Raspopovic, S., et al. Bioengineering: Restoring natural sensory feedback in real-time bidirectional hand prostheses. Science Translational Medicine. 6 (222), (2014).
  6. Flesher, S. N., et al. Intracortical microstimulation of human somatosensory cortex. Science Translational Medicine. 8 (361), (2016).
  7. Tabot, G. A., et al. Restoring the sense of touch with a prosthetic hand through a brain interface. Proceedings of the National Academy of Sciences. 110 (45), 18279-18284 (2013).
  8. Marasco, P. D., et al. Illusory movement perception improves motor control for prosthetic hands. Science Translational Medicine. 10 (432), (2018).
  9. Horch, K., Meek, S., Taylor, T. G., Hutchinson, D. T. Object discrimination with an artificial hand using electrical stimulation of peripheral tactile and proprioceptive pathways with intrafascicular electrodes. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 19 (5), 483-489 (2011).
  10. Braun, N., et al. The senses of agency and ownership: A review. Frontiers in Psychology. 9 (APR), (2018).
  11. Van Den Bos, E., Jeannerod, M. Sense of body and sense of action both contribute to self-recognition. Cognition. 85 (2), 177-187 (2002).
  12. Botvinick, M., Cohen, J. Rubber hands "feel" touch that eyes see. Nature. 391 (6669), 756 (1998).
  13. Gallagher, S. Philosophical conceptions of the self: Implications for cognitive science. Trends in Cognitive Sciences. 4 (1), 14-21 (2000).
  14. Niedernhuber, M., Barone, D. G., Lenggenhager, B. Prostheses as extensions of the body: Progress and challenges. Neuroscience & Biobehavioral Reviews. 92, 1-6 (2018).
  15. Marasco, P. D., Kim, K., Colgate, J. E., Peshkin, M. A., Kuiken, T. A. Robotic touch shifts perception of embodiment to a prosthesis in targeted reinnervation amputees. Brain. 134 (3), 747-758 (2011).
  16. Rognini, G., Blanke, O. Cognetics: Robotic Interfaces for the Conscious Mind. Trends in Cognitive Sciences. 20 (3), 162-164 (2016).
  17. Dewey, J. A., Knoblich, G. Do implicit and explicit measures of the sense of agency measure the same thing. PLoS ONE. 9 (10), (2014).
  18. Edwards, A. L. . Adaptive and Autonomous Switching: Shared Control of Powered Prosthetic Arms Using Reinforcement Learning. , (2016).
  19. Desai, M., Stubbs, K., Steinfeld, A., Yanco, H. Creating trustworthy robots: Lessons and inspirations from automated systems. Adaptive and Emergent Behaviour and Complex Systems – Proceedings of the 23rd Convention of the Society for the Study of Artificial Intelligence and Simulation of Behaviour, AISB 2009. , 49-56 (2009).
  20. Lee, J. D., See, K. A. Trust in automation: designing for appropriate reliance. Human Factors. 46 (1), 50-80 (2004).
  21. Moore, J. W. What is the sense of agency and why does it matter?. Frontiers in Psychology. 7 (AUG), 1-9 (2016).
  22. Obhi, S. S., Hall, P. Sense of agency in joint action: Influence of human and computer co-actors. Experimental Brain Research. 211 (3-4), 663-670 (2011).
  23. Sahaï, A., Pacherie, E., Grynszpan, O., Berberian, B. Co-representation of human-generated actions vs. machine-generated actions: Impact on our sense of we-Agency?. 2017 26th IEEE International Symposium on Robot and Human Interactive Communication (RO-MAN). , (2017).
  24. Biddiss, E., Chau, T. Upper limb prosthesis use and abandonment: A survey of the last 25 years. Prosthetics and Orthotics International. 31 (3), 236-257 (2007).
  25. Atkins, D. J., Heard, D. C. Y., Donovan, W. H. Epidemiologic overview of individuals with upper-limb loss and their reported research priorities. Journal of Prosthetics and Orthotics. 8 (1), 2-11 (1996).
  26. Kalckert, A., Ehrsson, H. H. Moving a Rubber Hand that Feels Like Your Own: A Dissociation of Ownership and Agency. Frontiers in Human Neuroscience. 6 (March), 1-14 (2012).
  27. Caspar, E. A., Cleeremans, A., Haggard, P. The relationship between human agency and embodiment. Consciousness and Cognition. 33, 226-236 (2015).
  28. Haggard, P., Clark, S., Kalogeras, J. Voluntary action and conscious awareness. Nature Neuroscience. 5 (4), 382-385 (2002).
  29. Engbert, K., Wohlschläger, A., Haggard, P. Who is causing what? The sense of agency is relational and efferent-triggered. Cognition. 107 (2), 693-704 (2008).
  30. Moore, J. W., Wegner, D. M., Haggard, P. Modulating the sense of agency with external cues. Consciousness and Cognition. 18 (4), 1056-1064 (2009).
  31. Kumar, V., Todorov, E. MuJoCo HAPTIX: A virtual reality system for hand manipulation. 2015 IEEE-RAS 15th International Conference on Humanoid Robots (Humanoids). , (2015).
  32. Kuiken, T. A., et al. Targeted reinnervation for enhanced prosthetic arm function in a woman with a proximal amputation: a case study. Lancet. 369 (9559), 371-380 (2007).

Play Video

Cite This Article
Schofield, J. S., Shell, C. E., Thumser, Z. C., Beckler, D. T., Nataraj, R., Marasco, P. D. Characterization of the Sense of Agency over the Actions of Neural-machine Interface-operated Prostheses. J. Vis. Exp. (143), e58702, doi:10.3791/58702 (2019).

View Video