오디오 기반의 가상 게임 환경의 개발은 맹인의 탐색 기술을 지원하는
Summary
오디오 기반의 환경 시뮬레이터 (AbES)는 맹인에서 현실 세계 탐색 능력을 향상하기위한 가상 환경 소프트웨어입니다.
Abstract
오디오 기반의 환경 시뮬레이터 (AbES)는 맹인에서 현실 세계 탐색 능력을 향상하기위한 가상 환경 소프트웨어입니다. 비디오 게임 은유의 컨텍스트 내에서만 오디오 기반 신호 및 설정을 사용하여 사용자는 건물의 레이아웃에 대한 관련 공간 정보를 수집합니다. 이는 사용자가 실제 실내 탐색 작업의 목적을 위해 조작 할 수있는 큰 규모의 3 차원 공간의 정확한 공간인지지도를 개발 할 수 있습니다. 게임 플레이 후, 참가자들은 다음 게임에서 표현 대상 물리적 건물 내에 이동할 수있는 능력을 평가합니다. 예비 결과는 초기 맹인 사용자가 탐색 작업 일련의에서의 실적에 의해 색인으로 이전에 익숙하지 않은 건물의 공간 배치에 대한 관련 정보를 취득 할 수있었습니다하시기 바랍니다. 이러한 작업은 가상 및 실제 건물을 찾는 경로뿐만 아니라 작업에서 드롭 일련의 포함되어 있습니다. 우리는 찾아 그 몰입그리고 AbES 소프트웨어의 고도로 대화 형 특성은 크게 적극적으로 가상 환경을 둘러 시각 장애인 사용자를 참여하기 위해 나타납니다. 이 방법의 응용 프로그램은 시각 장애인 개인의 큰 인구를 연장 할 수 있습니다.
Introduction
익숙하지 않은 환경에서 사람의 길을 찾는 것은 맹인을위한 중요한 과제로 제시합니다. 성공적으로 탐색하는 것은 사람의 자신과 환경 1,2의 객체 사이에 존재하는 공간 관계의 이해를 필요로합니다. 공간을 둘러싼 설명 정신 표현은 공간인지지도 3로 언급됩니다. 시각 장애인 개인은 4,5 실제 탐색 작업의 목적에 대한 정확한 공간인지지도의 생성을 허용하는 다른 감각 채널 (예 : 청각 등)을 통해 주변 환경에 대한 관련 공간 정보를 수집 할 수 있습니다.
상당한 관심 배우고 기술에게 6-9을 습득 할 수있는 수단으로 가상 환경과 액션 비디오 게임의 교육적인 가능성에 대해이 생겨났다. 사실, 많은 전략과 방법이 목적 (4,10-12 참조) 맹인을 위해 개발되었습니다. 우리는 아우디를 개발O-기반의 환경 시뮬레이터 (AbES), 기존의 물리적 인 건물의 시뮬레이션 탐색 및 탐구 기능을 제공하는 사용자 중심의 음성 기반 가상 환경을 제공합니다. AbES 소프트웨어 (그림 1A 및 B)로 생성 된, 원래의 건축 바닥 계획, 현대적인 2 층 건물 (뉴턴, MA 맹인을위한 캐롤 센터에 위치)의 가상 렌더링에서 그리기. AbES은 건물 공간의 전체 탐험을 촉진하기위한 전제있는 액션 게임 은유를 포함한다. 간단한 키 스트로크와 spatialized 사운드 신호를 사용하여 사용자가 탐색하고 다양한 객실에 숨겨진 보석의 최대 수를 수집하기 위해 건물 전체를 탐험 해보세요. 사용자들을 데려와 다른 건물 (그림 1C)에서를 숨길 수 있습니다 괴물을 roving 않도록해야합니다.
우리는 AbES와 상호 작용하는 것은 맹인 사용자가 청각 정보를 기반으로 대상 건물의 정확한 공간인지지도를 생성 할 수 있다는 것을 입증액션 게임 은유의 컨텍스트 내에서 cquired. 이것은 실제 세계와 대규모 실내 탐색 작업 (전체 학습 설계를위한 그림 2 참조)에 가상 환경에서 획득 한 공간 정보의 전송을 평가하기위한 사후 교육 행동 성능 테스트 일련의에 의해 확인된다. 우리의 결과는 결코 그 연구의 전반적인 목적에 대한 정보를이었다하거나, 사람들이의 공간 배치를 기억 지시 있다는 사실에도 불구하고, 맹인 사용자가 성공적으로는 이전에 익숙했다하는 건물 탐색 할 수 있는지 보여 게임을 재생하는 동안 구축.
Protocol
Representative Results
Discussion
우리는 맹인에서 일반 공간적 인식과 탐색 능력을 향상하기위한 대화 형 음성 기반 가상 환경 시뮬레이터를 설명합니다. 우리는 AbES과 상호 작용하는 개체와 대상 환경의 전반적인 레이아웃 사이의 공간 관계를 설명하는 정확한 신호를 제공하는 보여줍니다. 맹인 사용자는이 청각 정보와 몰입 가상 환경과 상호 작용에 의해 따라 정확한 공간인지지도를 생성 할 수 있습니다. 또한, 게임 은유의 ?…
Disclosures
The authors have nothing to disclose.
Acknowledgements
저자는이 연구를 수행에서의 지원 Rabih 다우, 패드 Rajagopal, 몰리 코너와 맹인을위한 캐롤 센터 (뉴턴 MA, USA)의 직원을 감사드립니다. RO1 EY019924 :이 작품은 NIH / NEI 보조금에 의해 지원되었다.
Materials
| Name of Equipment | Comments |
|---|---|
| Laptop computer | Laptop used exclusively for training participants and collecting data |
| Stereo Head phones (fully enclosed circumaural design) | Worn by all participants during training |
| Blindfold | Worn by all participants during training and testing |
References
- Loomis, J. M., Klatzky, R. L., Golledge, R. G. Navigating without vision: basic and applied research. Optom. Vis. Sci. 78, 282-289 (2001).
- Siegel, A. W., White, S. H. The development of spatial representations of large-scale environments. Adv. Child Dev. Behav. 10, 9-55 (1975).
- Strelow, E. R. What is needed for a theory of mobility: direct perception and cognitive maps–lessons from the blind. Psychol. Rev. 92, 226-248 (1985).
- Giudice, N. A., Bakdash, J. Z., Legge, G. E. Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions. Psychol. Res. 71, 347-358 (2007).
- Ashmead, D. H., Hill, E. W., Talor, C. R. Obstacle perception by congenitally blind children. Percept. Psychophys. 46, 425-433 (1989).
- Dede, C. Immersive interfaces for engagement and learning. Science. 323, 66-69 (2009).
- Bavelier, D., et al. Brains on video games. Nat. Rev. Neurosci. 12, 763-768 (2011).
- Bavelier, D., Green, C. S., Dye, M. W. Children, wired: for better and for worse. Neuron. 67, 692-701 (2010).
- Lange, B., et al. Designing informed game-based rehabilitation tasks leveraging advances in virtual reality. Disabil. Rehabil. , (2012).
- Merabet, L., Sánchez, J. Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience. AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).
- Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. Assessment of Indoor Route-finding Technology for People with Visual Impairment. J. Vis. Impair. Blind. 104, 135-147 (2010).
- Lahav, O., Schloerb, D. W., Srinivasan, M. A. Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study. Disabil. Rehabil. Assist Technol. , (2011).
