Summary

Caractérisation du sens de l’Agence sur les Actions de Neural-machine Interface commande prothèses

Published: January 07, 2019
doi:

Summary

Nous présentons ici un protocole qui caractérise le sens de l’agence mis au point pour le contrôle de sensorielles mains prothétiques virtuels ou robotiques. Psychophysiques questionnaires sont utilisés pour rendre l’expérience explicite de l’agence, et estimations d’intervalle de temps (liaison intentionnelle) sont employées pour mesurer implicitement le sens de l’Agence.

Abstract

Cet ouvrage décrit un cadre méthodologique qui peut être utilisé pour explicitement et implicitement caractériser le sens de l’agence mis au point sur le contrôle neural-machine interface (NMI) de sensorielles mains prothétiques virtuels ou robotiques. La formation de l’Agence est fondamentale pour distinguer les actions que nous effectuons avec nos membres comme étant notre propre. En s’efforçant d’intégrer les avancées des prothèses du membre supérieur dans ces mêmes mécanismes perceptifs, nous pouvons commencer à intégrer plus étroitement une prothèse cadre cognitif actuel de l’utilisateur pour le contrôle de la branche. Ceci a des implications importantes pour promouvoir l’acceptation par l’utilisateur, l’utilisation et un contrôle efficace des avancées prothèses du membre supérieur. Dans ce protocole, participants contrôlent une main prothétique virtuelle et rétroaction sensorielle kinesthésique à travers leurs INM préexistants. Exécute une série de tâches de préhension virtuels et perturbations sont systématiquement introduites dans les réactions kinesthésique et les mouvements de main virtuelle. Deux mesures distinctes d’agence sont employés : mis en place des questionnaires psychophysiques (pour capturer l’expérience explicite de l’Agence) et un intervalle de temps estiment tâche pour capturer le sens implicit de l’Agence (liaison intentionnelle). Résultats du présent protocole (scores du questionnaire et l’intervalle de temps estime) peuvent être analysées afin de quantifier le degré de formation de l’Agence.

Introduction

Comme les prothèses robotiques deviennent de plus en plus avancées, l’importance de la rétroaction sensorielle pertinente va continuer à croître. La rétroaction sensorielle influe sur les humains perçoivent, interagissent avec et même intègrent les machines dans leur schéma de corps. Les techniques récentes de NMI peuvent maintenant fournir membre utilisateurs contrôle intuitif et atteindre des sensations associées à touchent1,2,3,4,5,6 , 7 et kinesthésie (détection de mouvement)8,9 membres manquants. Lorsque cette information sensorielle est jumelée avec l’information visuelle fournie en regardant le membre artificiel au cours de l’opération, nous avons accès à des éléments clés qui informent la distinction d’auto –versus-autres. S’appuyant sur cet accès peut aider à mettre les utilisateurs de membre un pas de plus à une prothèse de fonctionnement dans le cadre de leur corps, plutôt qu’un simple outil.

Conscience du corps et le sentiment d’être incarné résulte de la mise en place de l’Agence (l’expérience de l’auteur sur les actions d’un membre) et de la propriété (le sentiment qu’une branche est une partie du corps)10,11. Propriété est véhiculée principalement par le biais de l’intégration du toucher et de l’information visuelle12. Agence se dégage de l’intégration de l’intention, sensation de mouvement (kinesthésie), des informations visuelles et les modèles cognitifs prédictive11. Pendant l’exécution d’une action volontaire, l’Agence se forme lorsque les conséquences sensorielles de ladite action alignent avec l’intention de l’artiste et les prédictions de modèles internes13 de l’interprète. L’Agence est indépendante et distincte de la propriété. Le concept de propriété de membre a été étudié fréquemment dans la littérature de prothèse14. Un sens des formes de propriété limb chez les participants NMI quand rétroaction tactile est spatialement et temporellement appropriée, comme ordre mesurée explicitement par le biais de questionnaires ou implicitement des changements de température du moignon ou temporelle jugements15. Toutefois, moins d’opportunités existent pour explorer l’Agence dans le cadre du NMI16. Des travaux récents avec des participants de NMI a démontré que l’agence peut être promue de façon ponctuelle et est séparée de l’expérience de propriété8.

L’Agence est particulièrement significatif dans le fonctionnement des prothèses robotiques car c’est un lien cognitif au contrôle des actions physiques de la prothèse à travers des expériences de la causalité, le sentiment de contrôler la prothèse ou la provocation quelque chose à arriver à17. Prothèses robotiques sont avancées des machines informatisées que l’utilisateur doit coopérer avec pour réaliser efficacement des tâches. Certaines prothèses ont intégré des fonctions autonomes, telles que la poignée antidérapante détection et de correction ; Pourtant, ces systèmes ont vu adoption limitée comme fonctionnalité en cours d’exécution en dehors du contrôle de l’utilisateur peut être considérée aussi frustrante si non mise en œuvre adéquate de8,18. Cela représente un défi fondamental qui trouve un écho dans l’ensemble des applications de la coopération humaine avec les machines autonomes. Autrement dit, les humains souvent confiance à leurs propres actions sur ceux qui résultent d’une collaboration avec ordinateurs physiques ou et cette confiance influence directement la probabilité de l’opérateur d’utiliser les fonctions autonomes19,20. En tant qu’humains, nous espérons naturellement nous-mêmes et nos corps pour exécuter les actions que nous avons l’intention ; Lorsque cela est réalisé, nous établissons un sens intrinsèque de l’Agence. Fait intéressant, la formation de l’Agence est affectée à des actions de coopération homme-machine. Au cours de tâches coopératives humain, un sens partagé de l’Agence peuvent être formé au cours du mouvement21; Pourtant, la littérature suggère que l’Office partagé est grevé au cours de la coopération homme-machine22,23. Ces défis sont reflétées dans les prothèses du membre supérieur utilisation et les taux de rejet des dispositifs robotiques restent élevés, avec 23 % – 39 % d’utilisateurs cesser leur utilisation24. En fait, de nombreux utilisateurs de prothèse préfèrent encore systèmes corps25. Ces systèmes d’éliminer la machine informatisée de la boucle de régulation et plus intimement couple mouvement du corps de l’utilisateur aux prothèse mouvement via câbles. Cela renforce l’importance de l’intégration cognitive dans l’utilisation des prothèses avancés. Nous suggérons de NMI systèmes peuvent offrir un certain nombre des pièces sensorielles et motrice nécessaires pour aider à déplacer les membres artificiels plus proche pour établir un sens coopératif de l’agence, et cela jouera un rôle important dans la promotion de l’acceptation et l’intégration réelle de ces machines informatisées avec leurs utilisateurs.

L’agence peut être mesurée dans un certain nombre de façons. Les mesures les plus simples utilisent des questionnaires psychologiques ou échelles qu’explicitement demandent aux participants à qui ou à quoi ils attribuent un événement17,26,27. Cela dépend de la perception actuelle de l’individu de « soi » en demandant aux participants de porter des jugements inférentielles de l’attribution (c.-à-d., explicitement de juger si « I » ou une autre entité était responsable d’une action ou un événement). Les mesures implicites donnent un aperçu de l’arrière-plan des processus cognitifs qui se produisent pendant l’action moteur et sensoriels événements. Ce point de vue de l’Agence tente de mesurer ce qui n’est pas explicitement perçue par un individu. En général, ceci est réalisé en ayant les participants à caractériser une différence perçue en soi et extérieurement-généré par des actions, par exemple les participants signaler la durée de temps, qu’ils semblent pour se produire entre un individu et extérieurement-événement généré 17 , 28. dans l’exercice des actions autoproduites, agence implicitement se manifeste par une compression perceptuelle dans le temps entre les actions et leurs conséquences sensorielles, appelées liaison intentionnelle28. Lorsque les individus signalera le temps qu’ils ont percevaient entre une action et son résultat, une plus courte durée perçue correspond à un sentiment plus fortement formé d’agence29,30. Fait intéressant, il a été démontré que des mesures explicites et implicites peuvent corréler pas directement car ils sont sans doute caractériser différents mécanismes perceptifs17 qui informent ensemble le sens de l’Agence. À ce titre, établissant une compréhension plus globale de formation de l’Agence lors de l’utilisation de prothèses nécessitera probablement des protocoles expérimentaux utilisant des mesures explicites et implicites.

Cet ouvrage décrit un cadre méthodologique qui peut être utilisé pour explicitement et implicitement caractériser le sens de l’agence mis au point le contrôle de NMI de sensorielles mains prothétiques virtuels ou robotiques. Deux techniques pour mesurer l’agence pendant l’exécution d’une tâche d’objet-préhension sensorimoteur sont mises en évidence. Questionnaires psychologiques établis sont utilisés pour rendre l’expérience explicite de l’agence, alors que les estimations d’intervalle de temps (liaison intentionnelle) sont employées pour mesurer implicitement le sens de l’Agence.

Le champ d’application du présent protocole est d’évaluer le sens de l’Agence dans le cadre d’un NMI assurant la motricité active physiologiquement pertinente et rétroaction kinesthésique. Ces techniques peuvent être généralisées aux systèmes de NMI prothétiques virtuels ou physiques. Il y a des restrictions minimales sur les populations qui peuvent être recrutées pour effectuer ce protocole. Par exemple, la mobilité des membres supérieurs du participant ne peut être affectée de façon bilatérale (ils doivent avoir une branche saine), et ils doivent posséder la capacité cognitive de porter des jugements basés sur le temps et d’articuler des sensations expérimentées.

Protocol

Ce protocole a été déjà approuvé et conforme aux lignes directrices du comité de déontologie de la recherche humaine de la clinique de Cleveland. 1. matériels et logiciels de l’INM Définir chaque participant individuel contrôle NMI et rétroaction afin que lorsqu’ils tentent d’effectuer un mouvement, ils voient et qu’ils sentent une prothèse virtuelle terminer ce mouvement. Générer un percept kinesthésique de main par le biais NMI du participant et captu…

Representative Results

Le protocole expérimental a été réalisé avec trois participants amputé d’une prothèse virtuel sensorielles via leur NMI8 (Figure 1). La configuration utilisée une main virtuelle contrôlable par participant, se déplaçant à travers des profils cinématiques préprogrammées à l’aide de la MuJoCo HAPTIX de moteur physique31. La main virtuelle était affichée sur un écran horizontal devan…

Discussion

Ici, un cadre méthodologique est présenté afin de caractériser l’expérience de l’agence formé lors de l’utilisation des prothèses sensorielles via INM. Dans ce contexte, l’Agence est particulièrement pertinent car il comble des mesures physiques pour les processus cognitifs de fond qui façonnent la perception. Grâce à d’un participant prothèse et NMI, nous avons un accès direct à un certain nombre d’éléments clés à établir le sens de l’Agence : intention, puissance moteur et sen…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Les auteurs tiens à remercier Madeline Newcomb pour sa contribution à la génération de la figure. Ce travail a été financé par les contribuables américains à travers un NIH, bureau du directeur, fonds commun, transformatrices R01 Research Award (subvention No 1R01NS081710-01) et la Defense Advanced Research Projects Agency (numéro de contrat N66001-15-C-4015 sous les auspices de Biologie technologie programme chef de bureau D. Weber).

Materials

LabVIEW 2015, Service Pack 1, Version 15.0.1f2 64-bit National Instruments, Austin, TX, USA Full or Pro Version We wrote custom software in LabVIEW to coordinate virtual prosthesis control with kinesthetic feedback as well as to present experimental conditions and record data.
8-Slot, USB CompactDAQ Chassis National Instruments, Austin, TX, USA cDAQ-9178
±60 V, 800 kS/s, 12-Bit, 8-Channel C Series Voltage Input Module National Instruments, Austin, TX, USA NI-9221
100 kS/s/ch Simultaneous, ±10 V, 4-Channel C Series Voltage Output Module National Instruments, Austin, TX, USA NI-9263
Custom Wearable Kinesthetic Tactor HDT Global, Solon, OH, USA N/A This item was custom made. Other methods of delivering kinesthetic feedback are acceptable as long as the participant feels the sensation of the hand moving in real-time with the movements of the virtual hand.
MuJoCo Physics Engine, HAPTIX Version Roboti LLC, Redmond, WA, USA mjhaptix150 Newer versions of MuJoCo should be acceptable as well. We used the MPL Gripper Model.
Myobock Electrodes, powered by Otto Bock EnergyPack in MyoBoy Battery Receptacle Ottobock, Duderstadt, Germany electrodes: 13E200=60
battery: 757B21
battery receptacle: 757Z191=2
Any setup that provides an amplified, filtered, and rectified EMG or neural control signal could be used.

References

  1. Kuiken, T. A., Marasco, P. D., Lock, B. A., Harden, R. N., Dewald, J. P. A. Redirection of cutaneous sensation from the hand to the chest skin of human amputees with targeted reinnervation. Proceedings of the National Academy of Sciences. 104 (50), 20061-20066 (2007).
  2. Hebert, J. S., et al. Novel targeted sensory reinnervation technique to restore functional hand sensation after transhumeral amputation. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 22 (4), 765-773 (2014).
  3. Tan, D. W., et al. A neural interface provides long-term stable natural touch perception. Science Translational Medicine. 257 (6), (2014).
  4. Oddo, C. M., et al. Intraneural stimulation elicits discrimination of textural features by artificial fingertip in intact and amputee humans. eLife. 5 (MARCH2016), (2016).
  5. Raspopovic, S., et al. Bioengineering: Restoring natural sensory feedback in real-time bidirectional hand prostheses. Science Translational Medicine. 6 (222), (2014).
  6. Flesher, S. N., et al. Intracortical microstimulation of human somatosensory cortex. Science Translational Medicine. 8 (361), (2016).
  7. Tabot, G. A., et al. Restoring the sense of touch with a prosthetic hand through a brain interface. Proceedings of the National Academy of Sciences. 110 (45), 18279-18284 (2013).
  8. Marasco, P. D., et al. Illusory movement perception improves motor control for prosthetic hands. Science Translational Medicine. 10 (432), (2018).
  9. Horch, K., Meek, S., Taylor, T. G., Hutchinson, D. T. Object discrimination with an artificial hand using electrical stimulation of peripheral tactile and proprioceptive pathways with intrafascicular electrodes. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 19 (5), 483-489 (2011).
  10. Braun, N., et al. The senses of agency and ownership: A review. Frontiers in Psychology. 9 (APR), (2018).
  11. Van Den Bos, E., Jeannerod, M. Sense of body and sense of action both contribute to self-recognition. Cognition. 85 (2), 177-187 (2002).
  12. Botvinick, M., Cohen, J. Rubber hands "feel" touch that eyes see. Nature. 391 (6669), 756 (1998).
  13. Gallagher, S. Philosophical conceptions of the self: Implications for cognitive science. Trends in Cognitive Sciences. 4 (1), 14-21 (2000).
  14. Niedernhuber, M., Barone, D. G., Lenggenhager, B. Prostheses as extensions of the body: Progress and challenges. Neuroscience & Biobehavioral Reviews. 92, 1-6 (2018).
  15. Marasco, P. D., Kim, K., Colgate, J. E., Peshkin, M. A., Kuiken, T. A. Robotic touch shifts perception of embodiment to a prosthesis in targeted reinnervation amputees. Brain. 134 (3), 747-758 (2011).
  16. Rognini, G., Blanke, O. Cognetics: Robotic Interfaces for the Conscious Mind. Trends in Cognitive Sciences. 20 (3), 162-164 (2016).
  17. Dewey, J. A., Knoblich, G. Do implicit and explicit measures of the sense of agency measure the same thing. PLoS ONE. 9 (10), (2014).
  18. Edwards, A. L. . Adaptive and Autonomous Switching: Shared Control of Powered Prosthetic Arms Using Reinforcement Learning. , (2016).
  19. Desai, M., Stubbs, K., Steinfeld, A., Yanco, H. Creating trustworthy robots: Lessons and inspirations from automated systems. Adaptive and Emergent Behaviour and Complex Systems – Proceedings of the 23rd Convention of the Society for the Study of Artificial Intelligence and Simulation of Behaviour, AISB 2009. , 49-56 (2009).
  20. Lee, J. D., See, K. A. Trust in automation: designing for appropriate reliance. Human Factors. 46 (1), 50-80 (2004).
  21. Moore, J. W. What is the sense of agency and why does it matter?. Frontiers in Psychology. 7 (AUG), 1-9 (2016).
  22. Obhi, S. S., Hall, P. Sense of agency in joint action: Influence of human and computer co-actors. Experimental Brain Research. 211 (3-4), 663-670 (2011).
  23. Sahaï, A., Pacherie, E., Grynszpan, O., Berberian, B. Co-representation of human-generated actions vs. machine-generated actions: Impact on our sense of we-Agency?. 2017 26th IEEE International Symposium on Robot and Human Interactive Communication (RO-MAN). , (2017).
  24. Biddiss, E., Chau, T. Upper limb prosthesis use and abandonment: A survey of the last 25 years. Prosthetics and Orthotics International. 31 (3), 236-257 (2007).
  25. Atkins, D. J., Heard, D. C. Y., Donovan, W. H. Epidemiologic overview of individuals with upper-limb loss and their reported research priorities. Journal of Prosthetics and Orthotics. 8 (1), 2-11 (1996).
  26. Kalckert, A., Ehrsson, H. H. Moving a Rubber Hand that Feels Like Your Own: A Dissociation of Ownership and Agency. Frontiers in Human Neuroscience. 6 (March), 1-14 (2012).
  27. Caspar, E. A., Cleeremans, A., Haggard, P. The relationship between human agency and embodiment. Consciousness and Cognition. 33, 226-236 (2015).
  28. Haggard, P., Clark, S., Kalogeras, J. Voluntary action and conscious awareness. Nature Neuroscience. 5 (4), 382-385 (2002).
  29. Engbert, K., Wohlschläger, A., Haggard, P. Who is causing what? The sense of agency is relational and efferent-triggered. Cognition. 107 (2), 693-704 (2008).
  30. Moore, J. W., Wegner, D. M., Haggard, P. Modulating the sense of agency with external cues. Consciousness and Cognition. 18 (4), 1056-1064 (2009).
  31. Kumar, V., Todorov, E. MuJoCo HAPTIX: A virtual reality system for hand manipulation. 2015 IEEE-RAS 15th International Conference on Humanoid Robots (Humanoids). , (2015).
  32. Kuiken, T. A., et al. Targeted reinnervation for enhanced prosthetic arm function in a woman with a proximal amputation: a case study. Lancet. 369 (9559), 371-380 (2007).

Play Video

Cite This Article
Schofield, J. S., Shell, C. E., Thumser, Z. C., Beckler, D. T., Nataraj, R., Marasco, P. D. Characterization of the Sense of Agency over the Actions of Neural-machine Interface-operated Prostheses. J. Vis. Exp. (143), e58702, doi:10.3791/58702 (2019).

View Video