Summary

Développement d'un environnement Audio-based jeux virtuels pour aider avec des compétences de navigation dans les aveugles

Published: March 27, 2013
doi:

Summary

Simulateur de l'environnement Audio-based (ABES) est un logiciel environnement virtuel conçu pour améliorer les compétences réelles de navigation dans le monde aveugle.

Abstract

Simulateur de l'environnement Audio-based (ABES) est un logiciel environnement virtuel conçu pour améliorer les compétences réelles de navigation dans le monde aveugle. En utilisant uniquement des signaux audio motivée et indiquer, dans le cadre d'une métaphore du jeu vidéo, les utilisateurs de recueillir des informations pertinentes en ce qui concerne la disposition spatiale d'un bâtiment. Cela permet à l'utilisateur de développer une carte spatiale précise cognitive d'un vaste espace à trois dimensions qui peuvent être manipulés à des fins d'une tâche de navigation intérieure réelle. Après le jeu, les participants sont ensuite évalués sur leur capacité à naviguer à l'intérieur du bâtiment cible physique représentée dans le jeu. Les résultats préliminaires suggèrent que les premiers utilisateurs aveugles ont pu acquérir des informations pertinentes au sujet de la disposition spatiale d'un bâtiment précédemment inconnu indexés par leur performance sur une série de tâches de navigation. Ces tâches comprennent la recherche de chemins à travers le bâtiment virtuel et physique, ainsi que d'une série de tâches drop off. Nous constatons que l'immersionet la nature hautement interactive du logiciel Abes semble grandement participer à l'utilisateur aveugle à explorer activement l'environnement virtuel. Les applications de cette approche peut s'étendre à de plus grandes populations de personnes ayant une déficience visuelle.

Introduction

Trouver son chemin dans un environnement inconnu se présente comme un défi important pour les aveugles. Naviguer avec succès nécessite une compréhension des relations spatiales qui existent entre soi-même et les objets de la 1,2 'environnement. La représentation mentale qui décrit l'espace environnant est considéré comme une carte cognitive spatiale 3. Les personnes aveugles peuvent recueillir des informations pertinentes en ce qui concerne l'espace leur environnement par le biais d'autres canaux sensoriels (tels que les prothèses) permettant la génération d'une carte précise cognitive spatiale aux fins de véritables tâches de navigation monde 4,5.

Un intérêt considérable a surgi concernant le potentiel éducatif des environnements virtuels et de jeux vidéo d'action comme un moyen d'apprendre et de maîtriser les compétences de 6-9. En effet, de nombreuses stratégies et approches ont été développées pour les aveugles à cet effet (voir 4,10-12). Nous avons développé AudiSimulateur o Environnement basé (ABES), une centrée sur l'utilisateur audio basé sur environnement virtuel qui permet une navigation simulée et l'exploration d'un bâtiment existant physique. Dessin de plans d'étage architecturaux originaux, un rendu virtuel d'un moderne bâtiment de deux étages (situé au centre de Carroll pour les aveugles; Newton, MA) ont été générés avec le logiciel ABES (figures 1A et B). Abes intègre une métaphore jeu d'action avec un principe visant à promouvoir l'exploration complète de l'espace de construction. En utilisant de simples touches et les indices sonores spatialisés, les utilisateurs à naviguer et à explorer l'ensemble du bâtiment pour recueillir un maximum de joyaux cachés dans les différentes pièces. Les utilisateurs doivent éviter les monstres itinérants qui peuvent les emporter et de les cacher ailleurs dans le bâtiment (figure 1C).

Nous démontrons que l'interaction avec l'ABES permet à un utilisateur aveugle pour générer une carte spatiale cognitive précise d'un bâtiment cible basée sur une information auditivecquired dans le cadre d'un jeu d'action métaphore. Ceci est confirmé par une série de post-formation des tests de performance de comportement visant à évaluer le transfert de l'information spatiale acquis auprès d'un environnement virtuel pour une tâche de navigation dans le monde réel et à grande échelle à l'intérieur (voir la figure 2 pour la conception de l'étude). Nos résultats montrent que les utilisateurs aveugles sont capables de naviguer avec succès dans un bâtiment pour lequel ils étaient précédemment inconnus, malgré le fait qu'à aucun moment ils ont été informés de l'objectif global de l'étude, ils ne se sont chargés de rappeler la disposition spatiale de la la construction tout en jouant.

Protocol

1. Profil démographique des participants Il s'agit d'une étude en cours qui recrute des aveugles participants hommes et femmes âgés de 18-45 ans. Tous les participants sont légalement aveugle d'apparition précoce (documenté avant l'âge de 3) et des étiologies oculaires. Aucun des participants à l'étude étaient auparavant familier avec la structure spatiale de l'édifice physique cible. 2. Préparation et familiarisation avec l'…

Representative Results

Les résultats de trois premiers participants aveugles (âgés entre 19 et 22 ans) sont indiqués (voir le tableau 1 pour les caractéristiques des participants). En résumé, les trois participants ont montré un taux de réussite élevé sur toutes les tâches de navigation trois jeu avec le logiciel ABES. Cela a été confirmé par les scores de performance (moyenne du groupe et individuel) sur les trois tâches comportementales (voir figure 6). Les performances pourcentage de répon…

Discussion

Nous décrivons une audio interactif basé sur simulateur d'environnement virtuel conçu pour améliorer la prise de conscience générale du territoire et les compétences de navigation à l'aveugle. Nous démontrons que l'interaction avec l'ABES donne des indices précis qui décrivent les relations spatiales entre les objets et la disposition générale de l'environnement cible. Les utilisateurs aveugles peuvent générer des cartes cognitives spatiales précises sur la base de ces informations au…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Les auteurs tiennent à remercier Rabih Dow, Padma Rajagopal, Molly Connors et le personnel du Centre de Carroll pour les aveugles (Newton MA, USA) pour leur soutien dans la réalisation de cette recherche. Ce travail a été soutenu par la subvention du NIH / NEI: RO1 EY019924.

Materials

Name of Equipment Comments
Laptop computer Laptop used exclusively for training participants and collecting data
Stereo Head phones (fully enclosed circumaural design) Worn by all participants during training
Blindfold Worn by all participants during training and testing

References

  1. Loomis, J. M., Klatzky, R. L., Golledge, R. G. Navigating without vision: basic and applied research. Optom. Vis. Sci. 78, 282-289 (2001).
  2. Siegel, A. W., White, S. H. The development of spatial representations of large-scale environments. Adv. Child Dev. Behav. 10, 9-55 (1975).
  3. Strelow, E. R. What is needed for a theory of mobility: direct perception and cognitive maps–lessons from the blind. Psychol. Rev. 92, 226-248 (1985).
  4. Giudice, N. A., Bakdash, J. Z., Legge, G. E. Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions. Psychol. Res. 71, 347-358 (2007).
  5. Ashmead, D. H., Hill, E. W., Talor, C. R. Obstacle perception by congenitally blind children. Percept. Psychophys. 46, 425-433 (1989).
  6. Dede, C. Immersive interfaces for engagement and learning. Science. 323, 66-69 (2009).
  7. Bavelier, D., et al. Brains on video games. Nat. Rev. Neurosci. 12, 763-768 (2011).
  8. Bavelier, D., Green, C. S., Dye, M. W. Children, wired: for better and for worse. Neuron. 67, 692-701 (2010).
  9. Lange, B., et al. Designing informed game-based rehabilitation tasks leveraging advances in virtual reality. Disabil. Rehabil. , (2012).
  10. Merabet, L., Sánchez, J. Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience. AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).
  11. Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. Assessment of Indoor Route-finding Technology for People with Visual Impairment. J. Vis. Impair. Blind. 104, 135-147 (2010).
  12. Lahav, O., Schloerb, D. W., Srinivasan, M. A. Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study. Disabil. Rehabil. Assist Technol. , (2011).
check_url/kr/50272?article_type=t

Play Video

Cite This Article
Connors, E. C., Yazzolino, L. A., Sánchez, J., Merabet, L. B. Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind. J. Vis. Exp. (73), e50272, doi:10.3791/50272 (2013).

View Video