SurfaceSight：为物联网体验提供触摸、用户和物体感应的新方法

物联网设备正在获得消费者的青睐，从智能恒温器到智能扬声器。这些设备通常具有有限的用户界面，最常见的是小按钮和触摸屏，或者依赖语音控制。此外，这些设备对其周围环境知之甚少——不了解周围的物体、人和活动。因此，与这些“智能”设备的交互可能会很繁琐且有限。我们描述了SurfaceSight，这是一种通过丰富的触摸和物体感应来丰富物联网体验的方法，提供了互补的输入通道和增强的环境感知能力。对于感应，我们将激光雷达集成到物联网设备的底部，提供了一个广阔的、临时的感应平面，位于设备放置的表面之上。我们可以识别和跟踪各种各样的物体，包括手指输入和手势。我们还可以跟踪人并估计他们的朝向。我们评估了这些新功能的准确性，并展示了如何使用它们来实现新颖且具有环境感知能力的交互体验。