Summary

虚拟现实中运动捕捉系统的日常生活运动运动学测量

Published: April 05, 2018
doi:

Summary

我们设计了一个虚拟现实测试, 以评估日常生活中的工具活动 (IADL) 与一个运动捕捉系统。我们提出了一个详细的运动学分析, 以解释参与者的各种运动, 包括弹道, 移动距离, 并完成时间, 以评估 IADL 能力。

Abstract

无法完成日常生活中的工具性活动 (IADL) 是各种神经心理疾病的前兆。基于问卷的 IADL 评估很容易使用, 但容易引起主观偏见。在这里, 我们描述了一个新的虚拟现实 (VR) 测试, 以评估两个复杂的 IADL 任务: 处理金融交易和使用公共交通。当参与者在 VR 设置中执行任务时, 运动捕获系统会跟踪占主导地位的手和头部在三维笛卡尔坐标系中的位置和方向。运动学原始数据被收集和转换成 ‘ 运动性能测量, ‘, 运动轨迹, 移动距离和完成时间。运动轨迹是空间中特定身体部分 (例如、主导的手或头) 的路径。移动距离指的是轨迹的总距离, 完成 IADL 任务所花费的时间。这些运动措施可能会歧视患者的认知障碍, 从健康的控制。这个运动测量协议的发展允许检测早期 IADL 相关的认知障碍。

Introduction

日常生活的工具活动 (IADL), 例如处理金融交易, 使用公共交通和烹调, 是医学标记, 因为他们需要多重神经心理学功能1。因此, IADL 能力受损被认为是神经疾病的前体, 如轻度认知障碍 (MCI) 和痴呆症2。黄金对 IADL 任务的全面审查3表示, 更具认知性要求的任务, 例如管理财务和使用公共交通, 是 MCI 和痴呆症的最早预测因素。

迄今为止, 最常用的 IADL 评估是自报告的调查表、基于线人的调查表和基于性能的评估4。基于问卷的 IADL 评估方法具有成本效益和易用性, 但容易引起主观偏见。例如, 当自我报告时, 患者倾向于过度或低估他们的 IADL 能力5。同样, 由于观察者的误解或知识缺口4, 举报人误判 IADL 能力。因此, 要求患者执行特定 IADL 任务的基于绩效的评估是可取的, 尽管许多任务不适用于一般临床设置6

最近, 虚拟现实 (VR) 研究表明, 这项技术可以在医学和医疗领域有重要的应用, 其中包括从训练到康复到医疗评估的所有内容7。所有参与者都可以在相同的 VR 条件下进行测试, 这会模仿真实世界。例如, Allain et8开发了一个虚拟的咖啡制作任务, 并表明有认知障碍的患者执行的任务很差。科林格et9为邮件和购物任务开发了另一个虚拟现实环境, 并发现 vr 中任务完成时间与神经心理测试结果之间有意义的关系。以前的 VR 研究 IADL 评估主要集中在简单的性能指标, 如反应时间或准确性时, 使用传统的输入设备, 如鼠标和键盘8,9。因此, 需要更详细的 IADL 性能数据, 以便有效地筛选 MCI4的患者。

实时运动捕获数据的运动学分析是定量记录与 IADL 任务相关的详细性能数据的有力方法。例如, 白色et10开发了一个虚拟厨房, 它在日常生活任务期间捕获参与者的联合角度数据, 并使用捕获的数据定量地评估物理治疗的有效性。Dimbwadyo-Terrer et11开发了一个身临其境的 VR 环境来评估在进行基本日常生活任务时上肢的表现, 并表明在 vr 环境中记录的运动学数据与上肢功能尺度高度相关。这些运动学分析与运动捕捉系统可以提供进一步的机会, 以快速评估患者的认知障碍12。将详细的运动学数据纳入 MCI 患者的筛查, 大大改善了与健康对照组比较的患者的分类13

在这里, 我们描述了一个协议, 以评估在身临其境的 VR 环境中的运动捕捉系统的日常生活运动的运动学。该协议包括两个复杂的 IADL 任务: “任务 1: 取款” (处理金融交易) 和 “任务 2: 乘坐公交车” (使用公共交通)。在完成任务的同时, 一个运动捕捉系统跟踪了支配手和头部的位置和方向。完成任务1后, 收集了主手轨迹、移动距离和完成时间。在任务2中, 收集了头部轨迹、移动距离和完成时间。本文的 “代表性结果” 部分详细介绍了 MCI 患者 (、IADL 功能受损) 与健康控制 (、IADL 功能完好) 的初步测试。

Protocol

根据赫尔辛基 (HYI-15-029-2) 的声明, 汉阳大学的机构审查委员会批准了这里描述的所有实验程序。6健康控制 (4 男性和2女性) 和6个 MCI 患者 (3 个男性和3位女性) 从汉阳大学医院的第三个医疗中心被招募了。 1. 招募参加者 招募 MCI 患者 (即, IADL 功能受损) 和健康控制 (即, 正常 IADL 功能), 年龄介于 70-80 岁之间。 在有10年临床经验的神经科医生的帮助下, …

Representative Results

用统计软件 R 分析了 “任务 1: 提取资金” 的 CSV 文件, 计算了主手轨迹、移动距离和完成时间。主导手运动的轨迹是可视化的 (图 6)。占主导地位的手的移动距离是通过在执行任务1的同时总结出顺序手位置之间的总距离来计算的。位置之间的距离是欧式距离。完成时间意味着完成整个任务所花费的时间 (即, 从步骤 1 “将卡插入 atm” 到步骤 8 “从 atm…

Discussion

在身临其境的 VR 环境中, 我们详细介绍了一种运动捕捉系统的日常生活运动测量协议。首先, 实验设置指导如何设置, 准备, 并使参与者熟悉身临其境的虚拟现实环境。其次, 我们在 VR 中开发了两个标准化的 IADL 任务。第三, 步骤3和步骤5在协议部分是最关键的步骤, 以尽量减少 VR 疾病。在虚拟环境中设置运动捕获系统 (步骤 3) 时, 很重要的一点是, 将跟踪摄像机安装到足够高的高度, 以便完全覆盖捕…

Divulgazioni

The authors have nothing to disclose.

Acknowledgements

K.S. 和 A.L. 贡献平等。这项研究得到了由科学、信息和通信技术 & 未来规划 (NRF-2016R1D1A1B03931389) 资助的韩国国家研究基金会 (NRF) 的基础科学研究项目的支持。

Materials

Computer N/A N/A Computer requirements:                                                            – Single socket H3 (LGA 1150) supports
– Intel® Xeon® E3-1200 v3, 4th gen. Core i7/i5/i3 processors
– Intel® C226 Express PCH
– Up to 32GB DDR3 ECC/non-ECC 1600MHz UDIMM in 4 sockets
– Dual Gigabit Ethernet LAN ports
– 8x SATA3 (6Gbps)
– 2x PCI-E 3.0 x16, 3x PCI-E 2.0 x1, and 2x PCI 5V 32-bit slots
– 6x USB 3.0 (2 rear + 4 via headers)
– 10x USB 2.0 (4 rear + 6 via headers)
– HD Audio 7.1 channel connector by Realtek ALC1150
– 1x DOM power connector and 1x SPDIF Out Header
– 800W High Efficiency Power Supply
– Intel Xeon E3-1230v3
– DDR3 PC12800 8GB ECC
– WD 1TB BLUE WD 10EZEX  3.5"
– NVIDIA QUADRO K5000 & SYNC
Stereoscopic 3D Projector Barco F35 AS3D WUXGA  Resolution:                                                                              – WQXGA (2,560 x 1,600)                                                           – Panorama (2,560 x 1,080)                                                         – WUXGA (1,920 x 1,200), 1080p (1,920 x 1,080) 
Stereoscopic Glasses Volfoni  Edge 1.2 For further information, visit http://volfoni.com/en/edge-1-2/
Motion Capture Systems NaturalPoint OptiTrack 17W For further information, visit http://optitrack.com/products/prime-17w/
OptiTrack (Motion capture software) NaturalPoint OptiTrack Motive 2.0 For further information, visit https://optitrack.com/downloads/motive.html
MiddleVR (Middleware software) MiddleVR MiddleVR For Unity For further information, visit http://www.middlevr.com/middlevr-for-unity/
VRDaemon (Middleware software) MiddleVR MiddleVR For Unity For further information, visit http://www.middlevr.com/middlevr-for-unity/
Unity3D (Game engine) Unity Technologies Personal For further information, visit https://unity3d.com/unity

Riferimenti

  1. Reppermund, S., et al. Impairment in instrumental activities of daily living with high cognitive demand is an early marker of mild cognitive impairment: the Sydney Memory and Ageing Study. Psychol. Med. 43 (11), 2437-2445 (2013).
  2. Graf, C. The Lawton instrumental activities of daily living scale. Am. J. Nurs. 108 (4), 52-62 (2008).
  3. Gold, D. A. An examination of instrumental activities of daily living assessment in older adults and mild cognitive impairment. J. Clin. Exp. Neuropsychol. 34 (1), 11-34 (2012).
  4. Jekel, K., et al. Mild cognitive impairment and deficits in instrumental activities of daily living: a systematic review. Alzheimers. Res. Ther. 7 (1), 17 (2015).
  5. Suchy, Y., Kraybill, M. L., Franchow, E. Instrumental activities of daily living among community-dwelling older adults: discrepancies between self-report and performance are mediated by cognitive reserve. J. Clin. Exp. Neuropsychol. 33 (1), 92-100 (2011).
  6. Desai, A. K., Grossberg, G. T., Sheth, D. N. Activities of Daily Living in patients with Dementia. CNS drugs. 18 (13), 853-875 (2004).
  7. Ma, M., Jain, L. C., Anderson, P. . Virtual, augmented reality and serious games for healthcare 1. 68, (2014).
  8. Allain, P., et al. Detecting everyday action deficits in Alzheimer’s disease using a nonimmersive virtual reality kitchen. J. Int. Neuropsychol. Soc. 20 (5), 468-477 (2014).
  9. Klinger, E., et al. AGATHE: A tool for personalized rehabilitation of cognitive functions based on simulated activities of daily living. IRBM. 34 (2), 113-118 (2013).
  10. White, D., Burdick, K., Fulk, G., Searleman, J., Carroll, J. A virtual reality application for stroke patient rehabilitation. ICMA. 2, 1081-1086 (2005).
  11. Dimbwadyo-Terrer, I., et al. Activities of daily living assessment in spinal cord injury using the virtual reality system Toyra: functional and kinematic correlations. Virtual Real. 20 (1), 17-26 (2016).
  12. Preische, O., Heymann, P., Elbing, U., Laske, C. Diagnostic value of a tablet-based drawing task for discrimination of patients in the early course of Alzheimer’s disease from healthy individuals. J. Alzheimers. Dis. 55 (4), 1463-1469 (2017).
  13. Seo, K., Kim, J. K., Oh, D. H., Ryu, H., Choi, H. Virtual daily living test to screen for mild cognitive impairment using kinematic movement analysis. PLOS ONE. 12 (7), e0181883 (2017).
  14. Albert, M. S., et al. The diagnosis of mild cognitive impairment due to Alzheimer’s disease: Recommendations from the National Institute on Aging-Alzheimer’s Association workgroups on diagnostic guidelines for Alzheimer’s disease. Alzheimers. Dement. 7 (3), 270-279 (2011).
  15. . Motive Quick Start Guide Available from: https://optitrack.com/public/documents/motive-quick-start-guide-v1.10.0.pdf (2017)
  16. Kennedy, R. S., Lane, N. E., Berbaum, K. S., Lilienthal, M. G. Simulator sickness questionnaire: An enhanced method for quantifying simulator sickness. Int. J. Aviat. Psychol. 3 (3), 203-220 (1993).
  17. Singh, N. B., Baumann, C. R., Taylor, W. R. Can Gait Signatures Provide Quantitative Measures for Aiding Clinical Decision-Making? A Systematic Meta-Analysis of Gait Variability Behavior in Patients with Parkinson’s Disease. Front. Hum. Neurosci. 10, 319 (2016).
  18. Hernandez, F., et al. Six degree-of-freedom measurements of human mild traumatic brain injury. Ann. Biomed. Eng. 43 (8), 1918-1934 (2015).
  19. Gamito, P., et al. Cognitive training on stroke patients via virtual reality-based serious games. Disabil. Rehabil. 39 (4), 385-388 (2017).
check_url/it/57284?article_type=t

Play Video

Citazione di questo articolo
Seo, K., Lee, A., Kim, J., Ryu, H., Choi, H. Measuring the Kinematics of Daily Living Movements with Motion Capture Systems in Virtual Reality. J. Vis. Exp. (134), e57284, doi:10.3791/57284 (2018).

View Video