Summary

En nätverksansluten Desktop Virtual Reality Setup för beslut vetenskap och navigering experiment med flera deltagare

Published: August 26, 2018
doi:

Summary

Detta dokument beskriver en metod för att genomföra flera användare experiment på beslutsfattande och navigering med hjälp av en nätverksansluten datorlaboratoriet.

Abstract

Undersöka samspel mellan flera deltagare är en utmaning för forskare från olika discipliner, inklusive beslut vetenskaper och spatial kognition. Med ett lokalt nätverk och dedikerad programvaruplattform, kan praktiker effektivt övervaka beteendet hos deltagarna som samtidigt är nedsänkta i en virtuell Skrivbordsmiljö och digitalisera insamlade data. Dessa funktioner kan för experimentell design i spatial kognition och navigering forskning som skulle vara svårt (om inte omöjligt) att genomföra i verkligheten. Möjliga experimentell variationer inkluderar stress under en evakuering, kooperativa och konkurrenskraftiga Sök uppgifter och andra kontextuella faktorer som kan påverka framväxande publiken beteende. Ett sådant laboratorium kräver dock underhåll och strikta protokoll för insamling av data i en kontrollerad miljö. Medan den externa giltigheten av laboratoriestudier med mänskliga deltagare ifrågasätts ibland, föreslår ett antal senaste tidningar att korrespondensen mellan verkliga och virtuella miljöer kan vara tillräcklig för att studera sociala beteende i termer av banor, tveksamheter och rumsliga beslut. I den här artikeln beskriver vi en metod för att utföra experiment på beslutsfattande och navigering med upp till 36 deltagare i en nätverksansluten stationära virtuell verklighet setup (dvs., de beslut Science Laboratory eller DeSciL). Detta experiment protokoll kan anpassas och användas av andra forskare för att inrätta ett nätverk stationära virtuell verklighet laboratorium.

Introduction

Forskning på spatial kognition och navigering vanligtvis studerar rumslig beslutsfattandet (t.ex., vrida vänster eller höger i en korsning) och mentala representation av individer i verkliga och virtuella miljöer1,2. Fördelarna med virtual reality (VR) är förebyggande av etik-och säkerhet (t.ex., under en farlig evakuering3), automatisk mätning och analys av geografiska data4och en balanserad kombination av inre och extern validitet5,6,7. Exempelvis utökat Weisberg och kollegor tidigare forskning om individuella skillnader i rumsliga kunskapsinhämtning genom att påvisa att rumsliga uppgifter i VR kan ge ett objektivt beteende mått på spatial förmåga8. Denna studie föreslog också att beteendet navigering i VR efterliknar verkliga navigering eftersom den virtuella miljön var modellerad efter universitetsområdet används av Schinazi och kollegor9 (se även studiet av Ruddle och kollegor 10). VR har också tillämpats på psykoterapi11, klinisk bedömning12, konsumenternas beteende13och kirurgi14,15. Men de flesta VR system saknar proprioceptiva och audio feedback som kan förbättra närvaro och nedsänkning16,17,18,19, kräver utbildning med styrgränssnittet20 ,21,22, och brist på sociala signaler. Faktiskt, människor i den verkliga världen flyttar ofta i grupper23, undvika eller följa andra personer3,24, och fatta beslut baserat på socialt sammanhang25,26.

Samtidigt, på publiken beteende ofta forskar om emergenta egenskaper hos folkmassorna (t.ex., lane formation, trängsel på flaskhalsar) som simuleras på en dator eller observerats i den verkliga världen. Till exempel Helbing och kollegor använde en kombination av verkliga observationer och datorsimuleringar för att föreslå förbättringar av trafikflödet i en korsning genom att separera inflöde och utflöde med fysiska barriärer och placera ett hinder i den centrera27. Moussaïd och kollegor använde en heuristik-baserad modell för att studera högdensitets situationer under en folkmassa katastrof28. Detta tillvägagångssätt föreslog förbättringar till en miljömässig inställning för massa händelser för att undvika folkmassa katastrofer. Med hjälp av en befintlig öppen källkod ram, kan genomförandet av dessa simuleringar vara relativt lätt. SteerSuite är ett open source ramverk som tillåter användare att simulera styrning algoritmer och publiken beteende enkelt genom att tillhandahålla verktyg för att underlätta, benchmarking och testning29. Denna ram kan ge kärnan i en agents navigering motivering, vilket är avgörande för framgångsrik publiken simulering. Dessutom visat Singh och kollegor en enda plattform som kombinerar en mängd styrning tekniker30. Medan forskare kan föreslå design interventioner med hjälp av dessa simuleringar, valideras de sällan med mänskliga deltagare i en kontrollerad miljö. Kontrollerade experiment är sällsynta i publiken forskning eftersom de kan vara svårt att organisera och farligt till deltagarna.

VR har använts för att undersöka sociala beteende med hjälp av enkla och komplexa virtuella miljöer med en eller flera datorsimulerad agenter. I studien av Bode och kollegor31,32ombads deltagarna att evakuera en enkel virtuell miljö från ett top-down perspektiv bland flera agenter och fann att avsluta val har påverkats av statiska skyltar och motivation. Presentera deltagarna med en mer komplex miljö ur ett första-person perspektiv, fann Kinateder och kollegor att deltagarna var mer benägna att följa datorsimulerad monoterapi under flykten från en virtuell tunnel brand25. I en komplex virtuell miljö med flera agenter fann Drury och kollegor att deltagarna tenderade att bistå en fallna agent under en evakuering när de identifieras med den publik26. Sammantaget tyder dessa fynd att VR kan vara ett effektivt sätt att framkalla sociala beteenden, även med datorsimulerade agenter. Vissa publiken beteenden kan dock endast observeras när det finns en realistisk social signal (dvs., när deltagarna känner att andra avatarer styrs av människor3). För att lösa denna brist, beskriver protokolls en metod för att genomföra kontrollerade experiment med flera användare i en nätverksansluten VR-setup. Detta tillvägagångssätt har varit anställd i en färsk studie av Moussaid och kollegor för att undersöka beteendet evakuering av 36 nätverksanslutna deltagare3.

Forskning på nätverksanslutna VR har fokuserat på ämnen utan samband med navigering strategier33,34 eller förlitat sig på befintliga online gaming plattformar såsom Second Life. Till exempel undersökt Molka-Danielsen och Chabada evakuering beteende när det gäller exit val och rumslig kunskap om byggnaden med deltagarna rekryterats bland befintliga användare av Second Life35. Medan författarna ge några beskrivande resultat (t.ex., visualiseringar av banor), denna studie hade svårigheter med deltagare rekrytering, experimentell kontroll och generalisering bortom detta specifika fall. Mer nyligen, Normoyle och kollegor fann att befintliga användare av Second Life och deltagare i ett laboratorium var jämförbara när det gäller evakuering prestanda och avsluta val och olika vad gäller självrapporterad närvaro och frustration med kontroll gränssnitt36. Resultaten från dessa två studier belysa några av de utmaningar och möjligheter som online och laboratorium experiment. Online studier klarar av ritning från en mycket större och motiverade befolkningen av potentiella deltagare. Laboratoriestudier tillåter dock för mer experimentell kontroll av den fysiska miljön och potentiella distraktioner. Dessutom kan online studier innebära vissa etiska betänkligheter angående data anonymitet och konfidentialitet.

Som en nätverksansluten desktop VR laboratorium används främst de beslut Science Laboratory (DeSciL) vid ETH Zürich att studera ekonomiska beslutsfattande och strategisk interaktion i en kontrollerad miljö. Den tekniska infrastrukturen på DeSciL består av hårdvara, programvara för laboratorieautomation och programvara som stöder flera användare skrivbordet VR setup. Hårdvaran inkluderar högpresterande stationära datorer med operativsystemet Microsoft Windows 10 Enterprise, kontroll gränssnitt (t.ex., mus och tangentbord, joysticks), hörlurar och eye trackers (Tabell för material). Alla klientdatorerna är anslutna med Ethernet en gigabit per sekund till universitetets nätverk och samma nätverksfilresursen. Det finns ingen synlig försening eller fördröjning när det finns 36 klienter som är anslutna. Antalet ramar per sekund är konsekvent över 100. Experimenten också hanteras och kontrolleras med laboratory automationsprogramvara baserat på Microsoft PowerShell (dvsPowerShell Desired State Configuration och PowerShell Remoting). Alla relevanta steg i protokollet är förprogrammerade med PowerShell-skript som kallas Cmdlets (t.ex., Start-dator, Stop-dator). Under experimentet, kan dessa skript köras samtidigt och distans på alla klientdatorer. Denna typ av laboratorieautomation säkerställer en identisk delstaten klienten datorer minskar potentiella fel och komplexitet under vetenskapliga tester och förhindrar forskare från att behöva utföra repetitiva manuella uppgifter. För navigering experiment, vi använder spelmotorn Unity () för att stödja utvecklingen av 2D- och 3D-miljöer för flera användare, interaktiva skrivbordet VR. 36 klientdatorerna är anslutna till en server via en auktoritär serverarkitektur. I början av varje experiment, varje klient skickar en instansiering begäran till servern och servern svarar med att instansiera en avatar för denna användare på alla anslutna maskiner. Varje användares avatar har en kamera med en 50 grader synfält. Hela experimentet, klienterna skickar användaren ‘ ingång till servern, och servern uppdateras rörligheten för alla klienter.

I fysiska laboratorium, är varje dator som ingår i ett separat skåp inom tre semi-oberoende rum (figur 1). Den totala storleken på laboratoriet är 170 m2 (150 m2 för experiment rum och 20 m2 för kontrollrummet). Dessa rum är utrustade med ljud och video inspelningsenheter. Experiment styrs från en separat angränsande rum (dvs., genom att ge instruktioner och initiera det experimentellt programmet). Från denna kontrollrummet, kan praktiker också följa deltagarna i både fysiska och virtuella miljöer. Tillsammans med Institutionen för nationalekonomi vid universitetet i Zürich bibehåller DeSciL också stadens universitet registrering för studiedeltagare, som genomfördes baserat på h-root37.

Även om liknande system har beskrivits i litteraturen38, är DeSciL den första funktionella laboratorium som lämpar sig för flera användare desktop VR experiment på navigation och publiken beteende till vår kunskap. Här beskriver vi protokollet för att genomföra ett experiment i DeSciL, nuvarande representativa resultat från en studie om social navigering beteende och diskutera möjligheter och begränsningar av detta system.

Protocol

Alla metoderna som beskrivs här har godkänts av forskning etiska kommittén av ETH Zürich som en del av förslaget EK 2015-N-37. 1. rekrytera deltagare för den planera experimentella sessionen. Prova deltagarna inom särskilda begränsningar (t.ex., ålder, kön, utbildningsbakgrund) använder deltagare rekryteringssystemet. Skicka inbjudningar via e-post till slumpmässigt utvalda deltagarna med hjälp av kontaktinformationen genom rekryteringssystemet. …

Representative Results

För varje klient för varje försök, experiment data från DeSciL vanligtvis inkluderar banor, tidsstämplar och mått av prestanda (t.ex., om deltagaren i ”rätt” riktning i en viss korsning). En representativ studie undersöktes effekterna av skyltning komplexitet på vägvalet för en publik av mänskliga deltagare (med virtuella avatarer) i en enkel Y-formad virtuell miljö. I detta experiment, 28 deltagare (12 kvinnor och 16 män; medelålder = 22,5) gavs samma mål pl…

Discussion

I den här artikeln beskrev vi ett fleranvändarsystem stationära virtuell verklighet laboratorium där upp till 36 deltagare kan interagera och samtidigt gå igenom olika virtuella miljöer. Det experimentellt protokollet Detaljer stegen krävs för denna typ av forskning och unika fleranvändarsystem scenarier. Överväganden som är specifika till dessa scenarier omfattar antalet deltagare i närvaro, kostnaden för till synes små försöksledaren fel, rendering och nätverk kapacitet (både server – och klientsidan…

Declarações

The authors have nothing to disclose.

Acknowledgements

Representativa studien har finansierats av schweiziska National Science Foundation som del av bidraget ”vägvisare i sociala miljöer” (No. 100014_162428). Vi vill tacka M. Moussaid för insiktsfulla diskussioner. Vi vill också tacka C. Wilhelm, F. Thaler, H. Tussilagos, S. Madjiheurem, A. Ingold och A. Grossrieder för deras arbete under programvaruutvecklingen.

Materials

PC Lenovo IdeaCentre AIO 700 24’’ screen, 16 GB RAM, and SSDs. CPU: Intel core i7. GPU:NVidia GeForce GTX 950A
Keyboard Lenovo LXH-EKB-10YA
Mouse Lenovo SM-8825
Eye tracker Tobii Technology Tobii EyeX Data rate: 60 Hz. Tracking screen size: Up to 27″
Communication audio system Biamp Systems Networked paging station – 1 Ethernet:100BaseTX

Referências

  1. Waller, D., Nadel, L. . Handbook of Spatial Cognition. , (2013).
  2. Denis, M. . Space and Spatial Cognition: A Multidisciplinary Perspective. , (2017).
  3. Moussaïd, M., Kapadia, M., Thrash, T., Sumner, R. W., Gross, M., Helbing, D., Hölscher, C. Crowd behaviour during high-stress evacuations in an immersive virtual environment. Journal of the Royal Society Interface. 13 (122), 20160414 (2016).
  4. Grübel, J., Weibel, R., Jiang, M. H., Hölscher, C., Hackman, D. A., Schinazi, V. R. EVE: A Framework for Experiments in Virtual Environments. Spatial Cognition X: Lecture Notes in Artificial Intelligence. , 159-176 (2017).
  5. Loomis, J. M., Blascovich, J. J., Beall, A. C. Immersive virtual environment technology as a basic research tool in psychology. Behavior Research Methods, Instruments, & Computers. 31 (4), 557-564 (1999).
  6. Brooks, F. P. What’s Real About Virtual Reality?. Proceedings IEEE Virtual Reality. , (1999).
  7. Moorthy, K., Munz, Y., Jiwanji, M., Bann, S., Chang, A., Darzi, A. Validity and reliability of a virtual reality upper gastrointestinal simulator and cross validation using structured assessment of individual performance with video playback. Surgical Endoscopy and Other Interventional Techniques. 18 (2), 328-333 (2004).
  8. Weisberg, S. M., Schinazi, V. R., Newcombe, N. S., Shipley, T. F., Epstein, R. A. Variations in cognitive maps: Understanding individual differences in navigation. Journal of Experimental Psychology: Learning Memory and Cognition. 40 (3), 669-682 (2014).
  9. Schinazi, V. R., Nardi, D., Newcombe, N. S., Shipley, T. F., Epstein, R. A. Hippocampal size predicts rapid learning of a cognitive map in humans. Hippocampus. 23 (6), 515-528 (2013).
  10. Ruddle, R. A., Payne, S. J., Jones, D. M. Navigating Large-Scale "Desk- Top" Virtual Buildings: Effects of orientation aids and familiarity. Presence. 7 (2), 179-192 (1998).
  11. Riva, G. Virtual Reality in Psychotherapy: Review. CyberPsychology & Behavior. 8 (3), 220-230 (2005).
  12. Ruse, S. A., et al. Development of a Virtual Reality Assessment of Everyday Living Skills. Journal of Visualized Experiments. (86), 1-8 (2014).
  13. Ploydanai, K., van den Puttelaar, J., van Herpen, E., van Trijp, H. Using a Virtual Store As a Research Tool to Investigate Consumer In-store Behavior. Journal of Visualized Experiments. (125), 1-15 (2017).
  14. Satava, R. M. Virtual reality surgical simulator – The first steps. Surgical Endoscopy. 7 (3), 203-205 (1993).
  15. Stanney, K. M., Hale, K. S. . Handbook of virtual environments: Design, implementation, and applications. , 811-834 (2014).
  16. Ryu, J., Kim, G. J. Using a vibro-tactile display for enhanced collision perception and presence. Proceedings of the ACM symposium on Virtual reality software and technology VRST 04. , 89 (2004).
  17. Louison, C., Ferlay, F., Mestre, D. R. Spatialized vibrotactile feedback contributes to goal-directed movements in cluttered virtual environments. 2017 IEEE Symposium on 3D User Interfaces (3DUI). , 99-102 (2017).
  18. Knierim, P., et al. Tactile Drones – Providing Immersive Tactile Feedback in Virtual Reality through Quadcopters. Proceedings of the 2017 CHI Conference Extended Abstracts on Human Factors in Computing Systems – CHI EA ’17. , 433-436 (2017).
  19. Serafin, S., Nordahl, R., De Götzen, A., Erkut, C., Geronazzo, M., Avanzini, F. Sonic interaction in virtual environments. 2015 IEEE 2nd VR Workshop on Sonic Interactions for Virtual Environments (SIVE). , 1-2 (2015).
  20. Grübel, J., Thrash, T., Hölscher, C., Schinazi, V. R. Evaluation of a conceptual framework for predicting navigation performance in virtual reality. PLoS One. 12 (9), (2017).
  21. Thrash, T., Kapadia, M., Moussaid, M., Wilhelm, C., Helbing, D., Sumner, R. W., Hölscher, C. Evaluation of control interfaces for desktop virtual environments. Presence. 24 (4), (2015).
  22. Ruddle, R. A., Volkova, E., Bülthoff, H. H. Learning to walk in virtual reality. ACM Transactions on Applied Perception. 10 (2), 1-17 (2013).
  23. Moussaïd, M., Perozo, N., Garnier, S., Helbing, D., Theraulaz, G. The walking behaviour of pedestrian social groups and its Impact on crowd dynamics. PLoS One. 5 (4), e10047 (2010).
  24. Bode, N. W. F., Franks, D. W., Wood, A. J., Piercy, J. J. B., Croft, D. P., Codling, E. A. Distinguishing Social from Nonsocial Navigation in Moving Animal Groups. The American Naturalist. 179 (5), 621-632 (2012).
  25. Kinateder, M., et al. Social influence on route choice in a virtual reality tunnel fire. Transportation Research Part F: Traffic Psychology and Behaviour. 26, 116-125 (2014).
  26. Drury, J., et al. Cooperation versus competition in a mass emergency evacuation: A new laboratory simulation and a new theoretical model. Behavior Research Methods. 41 (3), 957-970 (2009).
  27. Helbing, D., Buzna, L., Johansson, A., Werner, T. Self-Organized Pedestrian Crowd Dynamics: Experiments, Simulations, and Design Solutions. Transportation Science. 39 (1), 1-24 (2005).
  28. Moussaïd, M., Helbing, D., Theraulaz, G. How simple rules determine pedestrian behavior and crowd disasters. Proceedings of the National Academy of Sciences of the United States of America. 108 (17), 6884-6888 (2011).
  29. Singh, S., Kapadia, M., Faloutsos, P., Reinman, G. An open framework for developing, evaluating, and sharing steering algorithms. International Workshop on Motion in Games. , 158-169 (2009).
  30. Singh, S., Kapadia, M., Hewlett, B., Reinman, G., Faloutsos, P. A modular framework for adaptive agent-based steering. Symposium on Interactive 3D Graphics and Games. , (2011).
  31. Bode, N., Codling, E. Human exit route choice in virtual crowd evacuations. Animal Behaviour. 86, 347-358 (2013).
  32. Bode, N. W. F., Kemloh Wagoum, A. U., Codling, E. A. Human responses to multiple sources of directional information in virtual crowd evacuations. Journal of the Royal Society Interface. 11 (91), 20130904 (2014).
  33. Pandzic, I. S., Capin, T., Lee, E., Thalmann, N. M., Thalmann, D. A flexible architecture for virtual humans in networked collaborative virtual environments. Computer Graphics Forum. 16, (1997).
  34. Joslin, C., Pandzic, I. S., Thalmann, N. M. Trends in networked collaborative virtual environments. Computer Communications. 26 (5), 430-437 (2003).
  35. Molka-Danielsen, J., Chabada, M. Application of the 3D multi user virtual environment of Second Life to emergency evacuation simulation. System Sciences (HICSS), 2010 43rd Hawaii International Conference. , 1-9 (2010).
  36. Normoyle, A., Drake, J., Safonova, A. . Egress online: Towards leveraging massively, multiplayer environments for evacuation studies. , (2012).
  37. Bock, O., Baetge, I., Nicklisch, A. hroot: Hamburg registration and organization online tool. European Economic Review. 71, 117-120 (2014).
  38. Tanvir Ahmed, D., Shirmohammadi, S., Oliveira, J., Bonney, J. Supporting large-scale networked virtual environments. Virtual Environments, Human-Computer Interfaces and Measurement Systems, 2007. IEEE Symposium. , 150-154 (2007).
  39. Cipresso, P., Bessi, A., Colombo, D., Pedroli, E., Riva, G. Computational psychometrics for modeling system dynamics during stressful disasters. Frontiers in Psychology. 8, 1-6 (2017).
  40. Bernold, E., Gsottbauer, E., Ackermann, K., Murphy, R. . Social framing and cooperation: The roles and interaction of preferences and beliefs. , 1-26 (2015).
  41. Balietti, S., Goldstone, R. L., Helbing, D. Peer review and competition in the Art Exhibition Game. Proceedings of the National Academy of Sciences of the United States of America. 113 (30), 8414-8419 (2016).
  42. Gomez-Marin, A., Paton, J. J., Kampff, A. R., Costa, R. M., Mainen, Z. F. Big behavioral data: Psychology, ethology and the foundations of neuroscience. Nature Neuroscience. 17 (11), 1455-1462 (2014).

Play Video

Citar este artigo
Zhao, H., Thrash, T., Wehrli, S., Hölscher, C., Kapadia, M., Grübel, J., Weibel, R. P., Schinazi, V. R. A Networked Desktop Virtual Reality Setup for Decision Science and Navigation Experiments with Multiple Participants. J. Vis. Exp. (138), e58155, doi:10.3791/58155 (2018).

View Video