MaGEL：支持变形手势识别的柔软透明输入设备

DOI

我们提出 MaGEL，这是一种利用光强检测和解释用户变形交互的柔软输入设备。与传统的刚性输入设备不同，MaGEL 支持扭转、弯曲和拉伸等三维交互。此外，MaGEL 还包含弹性触觉反馈，为用户提供反映其交互张力或阻力的触觉体验。这些因素实现了直观自然的用户交互体验，用户可以使用熟悉的物理手势作为输入。例如，弯曲设备可以模拟翻书，拉伸设备可以放大图像。该设备由透明氨基甲酸酯树脂凝胶组成，两侧装有 LED 灯和光电晶体管。当设备凝胶变形时，穿过凝胶的光强会由于变形而产生特定变化。系统使用机器学习分析这些变化来识别用户手势。我们评估了用于准确分类变形的 LED 和光电晶体管的最优配置和数量。我们从 14 名参与者获取了 13 种变形手势的数据。结果表明，四个 LED 和十个光电晶体管的组合使 MaGEL 能够以 94.1% 的准确率识别 13 种变形手势。使用 MaGEL，我们提供了新颖的交互体验，例如使用弯曲、拉伸或扭转模拟自然游戏动作的游戏控制器。