EarHover: 使用声音泄漏信号实现可穿戴设备的空中手势识别

我们引入EarHover，一个为可穿戴设备实现空中手势输入的创新系统。空中手势输入无需触摸设备，有助于保持手部和设备清洁，根据之前的调查已知其需求很高。然而，现有的可穿戴设备空中手势输入方法仅限于添加摄像头或红外传感器。通过专注于可穿戴设备独有的声音泄漏现象，我们实现了使用与可穿戴设备高度兼容的扬声器和外部麦克风进行空中手势识别。声音泄漏导致设备外部的信号可以通过外部麦克风测量，该麦克风检测空中手势期间由手部速度和形状引起的反射特性差异。在27种手势中，我们确定了手势信号区分度和用户可接受性方面最适合EarHover的七种手势。然后，我们评估了两种原型设备（入耳式/开放式）在实际应用场景中的手势检测和分类性能。