Summary

面向多参与者的决策科学与导航实验的网络化桌面虚拟现实设置

Published: August 26, 2018
doi:

Summary

本文介绍了一种利用网络化计算机实验室进行多用户决策和导航实验的方法。

Abstract

研究多参与者之间的相互作用对不同学科的研究者来说是一个挑战, 包括决策科学和空间认知。通过局域网和专用软件平台, 实验者可以有效地监控参与者的行为, 同时沉浸在桌面虚拟环境中, 并数字化收集的数据。这些功能允许在空间认知和导航研究中进行实验设计, 这在现实世界中很难 (如果不是不可能的话) 进行。可能的实验性变化包括在疏散时的压力, 合作和竞争性搜索任务, 以及其他可能影响紧急人群行为的语境因素。然而, 这样一个实验室需要维护和严格的协议, 数据收集在一个受控的设置。虽然实验室研究与人类参与者的外部有效性有时受到质疑, 但最近的一些论文表明, 真实和虚拟环境之间的对应关系, 可能足以研究社会行为, 从轨迹, 犹豫和空间决定。在本文中, 我们描述了一个在一个网络桌面虚拟现实设置 (i., 决策科学实验室或 DeSciL) 上进行决策和导航实验的方法, 多达36名参与者。该实验协议可以由其他研究人员进行修改和应用, 以建立一个网络化的桌面虚拟现实实验室。

Introduction

空间认知与导航研究通常研究空间决策 (例如, 在交叉路口向左或向右拐) 和真实和虚拟环境中个体的心理表征1,2。虚拟现实的优点包括防止道德和安全问题 (例如, 在危险的疏散期间3), 对空间数据的自动测量和分析4, 以及平衡的内部和外部有效性5,6,7。例如, 韦斯伯格和同事对空间知识获取的个体差异进行了以往的研究, 证明虚拟现实中的空间任务可以为空间能力提供客观的行为测度8。本研究还建议 VR 中的导航行为近似于现实世界的导航, 因为虚拟环境是在 Schinazi 和同事9所使用的大学校园之后建模的 (也可以参见红土和同事的研究10). VR 也被应用到心理治疗11, 临床评估12, 消费者行为13和手术14,15。然而, 大多数 VR 系统缺乏本体和音频反馈, 可能改善存在和浸入16,17,18,19, 需要训练与控制接口20 ,21,22, 缺乏社会线索。事实上, 现实世界中的人们经常在23组中移动, 避免或跟随其他人3,24, 根据社会背景25,26做出决定。

同时, 对人群行为的研究往往集中在计算机上模拟或在现实世界中观察到的人群 (车道形成、瓶颈拥塞) 的紧急特征。例如, Helbing 和同事们使用了真实世界的观测和计算机模拟的结合, 以建议通过将流入和流出与物理屏障分开, 并将障碍物置于中心27。Moussaïd 和同事们使用一种基于启发式的模型来研究在28人群灾难中高密度的情况。这种方法建议改善群众活动的环境设置, 以避免人群灾害。在现有开源框架的帮助下, 这种模拟的实施可能相对容易。SteerSuite 是一个开源框架, 允许用户通过提供方便、基准和测试29的工具轻松地模拟转向算法和人群行为。这个框架可以提供一个代理的导航原理的核心, 这是成功的人群模拟的关键。此外, 辛格和同事展示了一个单一的平台, 结合了各种转向技术30。虽然研究人员可以使用这种模拟来提出设计干预, 但在受控环境中很少对人类参与者进行验证。对照实验在人群研究中是罕见的, 因为它们很难组织, 对参与者来说是危险的。

VR 已被用来调查社会行为使用简单和复杂的虚拟环境与一个或多个计算机模拟代理。在对预兆和同事31,32的研究中, 参与者被要求从自上而下的角度从一个简单的虚拟环境中疏散几个代理, 发现退出选择受到静态标志和动机的影响。Kinateder 和同事们从一个人的角度向参与者展示了一个更加复杂的环境, 他们发现参与者在逃离虚拟隧道火灾25的过程中更有可能跟随一个计算机模拟代理。在一个复杂的虚拟环境中, 有多个代理, 德鲁德和同事发现, 参加者在疏散时倾向于协助倒下的特工, 当他们发现26人群时。总的来说, 这些发现表明 VR 可以是一种有效的方式来诱发社会行为, 甚至与计算机模拟的代理人。然而, 只有当有一个现实的社会信号 (如, 当参与者知道其他化身是由人控制的3) 时, 某些人群行为才会被观察到。为了解决这一缺点, 本议定书描述了一种在网络虚拟现实设置中进行多用户控制实验的方法。Moussaid 和同事最近进行的一项研究中使用了这种方法, 以调查36名网络参与者3的疏散行为。

对网络虚拟现实的研究重点放在与导航策略无关的主题3334和/或依赖于现有的在线游戏平台, 如第二人生。例如, Molka-丹尼尔森和 Chabada 利用第二生命35的现有用户中招募的参与者, 调查撤离选择和建筑空间知识方面的疏散行为。虽然作者提供了一些描述性的结果 (例如, 轨迹的可视化), 这项研究在参与者的招募, 实验控制, 和泛化以外的具体情况下有困难。最近, Normoyle 和同事发现, 在实验室中, 第二生命和参与者的现有用户在疏散性能和退出选择方面可比, 在自我报告的存在和对控制的挫折方面不同。接口36。这两项研究的结果突出了在线和实验室实验提供的一些挑战和机会。在线学习可以从一个更大和有积极性的潜在参与者的人群中吸取。然而, 实验室研究允许更多的实验性控制的物理环境和潜在的分心。此外, 在线研究可能会对数据匿名和保密性造成一些伦理上的关注。

作为一个网络化的桌面 VR 实验室, 苏黎世的决策科学实验室 (DeSciL) 主要用于研究在受控环境中的经济决策和战略互动。DeSciL 的技术基础设施包括硬件、实验室自动化软件和支持多用户桌面 VR 设置的软件。硬件包括具有 Microsoft Windows 10 企业操作系统的高性能台式计算机、控制接口 (例如, 鼠标和键盘、游戏杆)、耳机和眼睛跟踪器 (材料表)。所有客户端计算机都用一个千兆字节每秒的以太网连接到大学网络和相同的网络文件共享。当有36个客户端连接时, 没有可见的延迟或滞后。每秒帧数始终在100以上。实验还通过基于 Microsoft PowerShell (PowerShell 所需的状态配置和 PowerShell 远程处理) 的实验室自动化软件进行管理和控制。该协议的所有相关步骤都是预先编写的, PowerShell 脚本称为 cmdlet (例如, 启动计算机, 停止计算机)。在实验过程中, 这些脚本可以在所有客户端计算机上同时和远程执行。这类实验室自动化确保了客户端计算机的相同状态, 减少了科学测试过程中的潜在错误和复杂性, 并防止研究人员不得不执行重复的手动任务。对于导航实验, 我们使用统一游戏引擎 (), 以支持为多用户, 交互式桌面 VR 的2D 和3D 环境的发展。36台客户端计算机通过权威服务器体系结构连接到服务器。每次实验开始时, 每个客户端都会向服务器发送一个实例化请求, 服务器通过在所有连接的计算机上为该用户实例化一个头像来响应。每个用户的头像有一个50度视野的相机。在整个实验过程中, 客户端向服务器发送用户输入, 服务器更新所有客户端的移动。

在物理实验室中, 每台计算机都包含在三个半独立房间 (图 1) 中的一个单独的隔间中。实验室的整体大小是 170 m2 (150 m2为实验室和 20 m2为控制室)。每间客房均配备有录音和录像设备。实验由一个单独的相邻房间 (i. e) 控制, 通过提供指示和启动实验程序。在这个控制室里, 实验者还可以观察物理和虚拟环境中的参与者。DeSciL 还与苏黎世大学的经济系合作, 为研究参与者设立了大学登记中心, 该培训中心是基于 h 根37实施的。

虽然类似的系统已经在文献38中描述, DeSciL 是第一个功能实验室, 适合多用户桌面 VR 实验的导航和人群行为, 我们的知识。在这里, 我们描述了在 DeSciL 进行实验的协议, 这是一个关于社会导航行为的研究的代表结果, 并讨论了这个系统的潜力和局限性。

Protocol

这里描述的所有方法都已被瑞士联邦研究伦理委员会批准, 作为提案的一部分, 克朗 2015-N-37。 1. 征聘参加计划的实验性会议的与会者。 使用参与者招聘系统, 在特定的限制条件下 (例如, 年龄、性别、教育背景) 对参与者进行抽样。 使用招聘系统提供的联系信息, 通过电子邮件将邀请发送给随机选定的参与者。 等待这些参与者通过在线系统注册。?…

Representative Results

对于每一次试验中的每个客户, DeSciL 中的实验数据通常包括轨迹、时间戳和性能度量 (例如, 参与者是否在某个交叉路口打开 “正确” 方向)。一项代表性的研究调查了在简单的 Y 形虚拟环境中, 在人类参与者 (虚拟化身) 的人群中, 标志复杂度对路线选择的影响。在这个实验中, 28 名参与者 (12 名妇女和16男子; 平均年龄 = 22.5) 被赋予相同的目标位置 (i. e., 门号), 并…

Discussion

在本文中, 我们描述了一个多用户桌面虚拟现实实验室, 其中多达36个参与者可以交互和同时浏览各种虚拟环境。实验协议详细介绍了此类研究所需的步骤以及对多用户方案的独特性。这些方案的具体考虑包括出席人数、看似小的实验者错误的成本、渲染和网络能力 (服务器和客户端)、与控制界面的培训以及数据安全。预定参加者是必要的, 以确保在一个实验性会议的确切数目的参与者。如果参加?…

Disclosures

The authors have nothing to disclose.

Acknowledgements

该代表的研究由瑞士国家科学基金会资助, 作为赠款 “导向社会环境” (100014_162428) 的一部分。我们要感谢 m. Moussaid 有见地的讨论。我们还要感谢 c. 威廉、f. 泰勒、h. Abdelrahman、s Madjiheurem、a Ingold 和 Grossrieder 在软件开发期间的工作。

Materials

PC Lenovo IdeaCentre AIO 700 24’’ screen, 16 GB RAM, and SSDs. CPU: Intel core i7. GPU:NVidia GeForce GTX 950A
Keyboard Lenovo LXH-EKB-10YA
Mouse Lenovo SM-8825
Eye tracker Tobii Technology Tobii EyeX Data rate: 60 Hz. Tracking screen size: Up to 27″
Communication audio system Biamp Systems Networked paging station – 1 Ethernet:100BaseTX

References

  1. Waller, D., Nadel, L. . Handbook of Spatial Cognition. , (2013).
  2. Denis, M. . Space and Spatial Cognition: A Multidisciplinary Perspective. , (2017).
  3. Moussaïd, M., Kapadia, M., Thrash, T., Sumner, R. W., Gross, M., Helbing, D., Hölscher, C. Crowd behaviour during high-stress evacuations in an immersive virtual environment. Journal of the Royal Society Interface. 13 (122), 20160414 (2016).
  4. Grübel, J., Weibel, R., Jiang, M. H., Hölscher, C., Hackman, D. A., Schinazi, V. R. EVE: A Framework for Experiments in Virtual Environments. Spatial Cognition X: Lecture Notes in Artificial Intelligence. , 159-176 (2017).
  5. Loomis, J. M., Blascovich, J. J., Beall, A. C. Immersive virtual environment technology as a basic research tool in psychology. Behavior Research Methods, Instruments, & Computers. 31 (4), 557-564 (1999).
  6. Brooks, F. P. What’s Real About Virtual Reality?. Proceedings IEEE Virtual Reality. , (1999).
  7. Moorthy, K., Munz, Y., Jiwanji, M., Bann, S., Chang, A., Darzi, A. Validity and reliability of a virtual reality upper gastrointestinal simulator and cross validation using structured assessment of individual performance with video playback. Surgical Endoscopy and Other Interventional Techniques. 18 (2), 328-333 (2004).
  8. Weisberg, S. M., Schinazi, V. R., Newcombe, N. S., Shipley, T. F., Epstein, R. A. Variations in cognitive maps: Understanding individual differences in navigation. Journal of Experimental Psychology: Learning Memory and Cognition. 40 (3), 669-682 (2014).
  9. Schinazi, V. R., Nardi, D., Newcombe, N. S., Shipley, T. F., Epstein, R. A. Hippocampal size predicts rapid learning of a cognitive map in humans. Hippocampus. 23 (6), 515-528 (2013).
  10. Ruddle, R. A., Payne, S. J., Jones, D. M. Navigating Large-Scale "Desk- Top" Virtual Buildings: Effects of orientation aids and familiarity. Presence. 7 (2), 179-192 (1998).
  11. Riva, G. Virtual Reality in Psychotherapy: Review. CyberPsychology & Behavior. 8 (3), 220-230 (2005).
  12. Ruse, S. A., et al. Development of a Virtual Reality Assessment of Everyday Living Skills. Journal of Visualized Experiments. (86), 1-8 (2014).
  13. Ploydanai, K., van den Puttelaar, J., van Herpen, E., van Trijp, H. Using a Virtual Store As a Research Tool to Investigate Consumer In-store Behavior. Journal of Visualized Experiments. (125), 1-15 (2017).
  14. Satava, R. M. Virtual reality surgical simulator – The first steps. Surgical Endoscopy. 7 (3), 203-205 (1993).
  15. Stanney, K. M., Hale, K. S. . Handbook of virtual environments: Design, implementation, and applications. , 811-834 (2014).
  16. Ryu, J., Kim, G. J. Using a vibro-tactile display for enhanced collision perception and presence. Proceedings of the ACM symposium on Virtual reality software and technology VRST 04. , 89 (2004).
  17. Louison, C., Ferlay, F., Mestre, D. R. Spatialized vibrotactile feedback contributes to goal-directed movements in cluttered virtual environments. 2017 IEEE Symposium on 3D User Interfaces (3DUI). , 99-102 (2017).
  18. Knierim, P., et al. Tactile Drones – Providing Immersive Tactile Feedback in Virtual Reality through Quadcopters. Proceedings of the 2017 CHI Conference Extended Abstracts on Human Factors in Computing Systems – CHI EA ’17. , 433-436 (2017).
  19. Serafin, S., Nordahl, R., De Götzen, A., Erkut, C., Geronazzo, M., Avanzini, F. Sonic interaction in virtual environments. 2015 IEEE 2nd VR Workshop on Sonic Interactions for Virtual Environments (SIVE). , 1-2 (2015).
  20. Grübel, J., Thrash, T., Hölscher, C., Schinazi, V. R. Evaluation of a conceptual framework for predicting navigation performance in virtual reality. PLoS One. 12 (9), (2017).
  21. Thrash, T., Kapadia, M., Moussaid, M., Wilhelm, C., Helbing, D., Sumner, R. W., Hölscher, C. Evaluation of control interfaces for desktop virtual environments. Presence. 24 (4), (2015).
  22. Ruddle, R. A., Volkova, E., Bülthoff, H. H. Learning to walk in virtual reality. ACM Transactions on Applied Perception. 10 (2), 1-17 (2013).
  23. Moussaïd, M., Perozo, N., Garnier, S., Helbing, D., Theraulaz, G. The walking behaviour of pedestrian social groups and its Impact on crowd dynamics. PLoS One. 5 (4), e10047 (2010).
  24. Bode, N. W. F., Franks, D. W., Wood, A. J., Piercy, J. J. B., Croft, D. P., Codling, E. A. Distinguishing Social from Nonsocial Navigation in Moving Animal Groups. The American Naturalist. 179 (5), 621-632 (2012).
  25. Kinateder, M., et al. Social influence on route choice in a virtual reality tunnel fire. Transportation Research Part F: Traffic Psychology and Behaviour. 26, 116-125 (2014).
  26. Drury, J., et al. Cooperation versus competition in a mass emergency evacuation: A new laboratory simulation and a new theoretical model. Behavior Research Methods. 41 (3), 957-970 (2009).
  27. Helbing, D., Buzna, L., Johansson, A., Werner, T. Self-Organized Pedestrian Crowd Dynamics: Experiments, Simulations, and Design Solutions. Transportation Science. 39 (1), 1-24 (2005).
  28. Moussaïd, M., Helbing, D., Theraulaz, G. How simple rules determine pedestrian behavior and crowd disasters. Proceedings of the National Academy of Sciences of the United States of America. 108 (17), 6884-6888 (2011).
  29. Singh, S., Kapadia, M., Faloutsos, P., Reinman, G. An open framework for developing, evaluating, and sharing steering algorithms. International Workshop on Motion in Games. , 158-169 (2009).
  30. Singh, S., Kapadia, M., Hewlett, B., Reinman, G., Faloutsos, P. A modular framework for adaptive agent-based steering. Symposium on Interactive 3D Graphics and Games. , (2011).
  31. Bode, N., Codling, E. Human exit route choice in virtual crowd evacuations. Animal Behaviour. 86, 347-358 (2013).
  32. Bode, N. W. F., Kemloh Wagoum, A. U., Codling, E. A. Human responses to multiple sources of directional information in virtual crowd evacuations. Journal of the Royal Society Interface. 11 (91), 20130904 (2014).
  33. Pandzic, I. S., Capin, T., Lee, E., Thalmann, N. M., Thalmann, D. A flexible architecture for virtual humans in networked collaborative virtual environments. Computer Graphics Forum. 16, (1997).
  34. Joslin, C., Pandzic, I. S., Thalmann, N. M. Trends in networked collaborative virtual environments. Computer Communications. 26 (5), 430-437 (2003).
  35. Molka-Danielsen, J., Chabada, M. Application of the 3D multi user virtual environment of Second Life to emergency evacuation simulation. System Sciences (HICSS), 2010 43rd Hawaii International Conference. , 1-9 (2010).
  36. Normoyle, A., Drake, J., Safonova, A. . Egress online: Towards leveraging massively, multiplayer environments for evacuation studies. , (2012).
  37. Bock, O., Baetge, I., Nicklisch, A. hroot: Hamburg registration and organization online tool. European Economic Review. 71, 117-120 (2014).
  38. Tanvir Ahmed, D., Shirmohammadi, S., Oliveira, J., Bonney, J. Supporting large-scale networked virtual environments. Virtual Environments, Human-Computer Interfaces and Measurement Systems, 2007. IEEE Symposium. , 150-154 (2007).
  39. Cipresso, P., Bessi, A., Colombo, D., Pedroli, E., Riva, G. Computational psychometrics for modeling system dynamics during stressful disasters. Frontiers in Psychology. 8, 1-6 (2017).
  40. Bernold, E., Gsottbauer, E., Ackermann, K., Murphy, R. . Social framing and cooperation: The roles and interaction of preferences and beliefs. , 1-26 (2015).
  41. Balietti, S., Goldstone, R. L., Helbing, D. Peer review and competition in the Art Exhibition Game. Proceedings of the National Academy of Sciences of the United States of America. 113 (30), 8414-8419 (2016).
  42. Gomez-Marin, A., Paton, J. J., Kampff, A. R., Costa, R. M., Mainen, Z. F. Big behavioral data: Psychology, ethology and the foundations of neuroscience. Nature Neuroscience. 17 (11), 1455-1462 (2014).
check_url/58155?article_type=t

Play Video

Cite This Article
Zhao, H., Thrash, T., Wehrli, S., Hölscher, C., Kapadia, M., Grübel, J., Weibel, R. P., Schinazi, V. R. A Networked Desktop Virtual Reality Setup for Decision Science and Navigation Experiments with Multiple Participants. J. Vis. Exp. (138), e58155, doi:10.3791/58155 (2018).

View Video