MeCap：用于低成本VR/AR头显的全身数字化技术

低价、智能手机驱动的VR/AR头显正在变得更加流行。这些基本设备——仅仅是塑料或纸板外壳——缺乏高级功能，如手部控制器，限制了交互能力。此外，即使高端消费级头显也缺乏跟踪身体和面部的能力。因此，社交VR等交互体验发展不足。我们引入了MeCap，使消费级VR头显能够以极低成本（低于5美元）增强强大的动作捕捉（"MoCap"）和用户感知能力。通过仅使用一对半球面镜和智能手机现有的后置摄像头，MeCap可实时估计佩戴者的3D身体姿态、手部姿势、面部表情、外貌和周围环境——这些功能在当代VR/AR系统中要么不存在，要么需要专用硬件和控制器。我们评估了每项跟踪功能的准确性，结果表明其可行性即将实现。