SolePoser：使用鞋垫压力传感器的实时3D人体姿态估计

我们提出SolePoser，这是一个仅利用单对鞋垫传感器即可实现的实时3D姿态估计系统。与依赖固定摄像头或笨重可穿戴传感器的传统方法不同，我们的方案只需极小化且自然的设置。所提出的系统利用嵌入鞋垫的压力传感器和惯性测量单元（IMU）传感器来捕捉脚部的体重压力分布及其六自由度加速度信息。这些信息被用于通过双流Transformer网络估计全身三维关节位置。我们还引入了一种新颖的双循环一致性损失和交叉注意力模块，以学习三维脚部位置与其压力分布之间的关系。我们还引入了两个不同的运动和日常运动数据集，包含八种不同活动的908k帧。我们的实验表明，我们方法的性能与使用更多IMU的最佳方法相当，在某些场景下甚至优于第三人称视角摄像头方法。