C4.06.4Pinch failure from occlusion设计研究

指尖被遮挡或手背朝向传感器时识别失败

别名: 捏合遮挡 · self-occlusion · dorsal view · 手背朝向

概念解释

隔空捏合依赖看见两指指尖的相对位置。拇指被其余手指挡住、手背对着相机、另一只手或物体插在中间,视觉上的合上/松开就会消失或乱跳。用户侧的触觉边沿还在,所以失败表现为“我明明捏了,没有任何点击”。这不是词表没教好,也不是挥手幅度不够,是这条手势的传感前提:指尖必须对传感器可见。头戴设备看自己的手心时前提常成立;手一翻、或房间相机从正面打到手背,前提就没了。

机制

光学手部追踪用的是指尖在图像上的分离。掌心朝相机时,拇指与食指的空隙是一条高对比缝;手背朝向时,拇指被掌和其余指挡住,缝在画面上合拢,模型只能靠先验去猜指尖,距离曲线不再有可靠拐点。侧光、逆光让缝的对比下降,同样的几何在成像上变糊。自遮挡随抓握变化:越接近合上,拇指越被挡住,恰恰在最需要拐点的时刻可见性最差。深度相机在反光戒指、深色手套上丢点,曲线会出现假拐点,造成没捏却点。失败因此分两种:看不见导致漏、乱看见导致谎报。

怎么研究

按手的朝向分箱:掌心对传感器、手背对传感器、侧向 45°、90°,每箱单独报短捏命中和谎报。再加一条自遮挡轴:拇指从完全可见到完全被食指挡住。光照作第三轴:正面光、侧光、窗边逆光。头戴与房间相机分开测,不要混成一个“捏合识别率”。让人戴戒指、手套、假甲,作为材料条件。主观上记录“我已捏但无反馈”的次数,那才是用户看见的失败。

边界

多相机或手部与腕部惯性传感融合,可以在短时间遮挡里插值,但翻掌超过几百毫秒仍会丢。电磁或超声波指尖标记能绕过可见性,那已经不是纯视觉捏合。黑暗中红外主动光可以保住掌心视角,救不了手背视角。儿童手指短、缝更窄,同样朝向的失败来得更早。把失败当成用户“手势不标准”去纠,会逼人把掌心始终对着相机,任务里需要看手背或自然垂手时做不到。

怎么落地

  • 在教学和失败提示里写明“掌心对着可被看到的方向”,并把手背朝向列为已知失效,而不是笼统的“请重试”。
  • 捏合失败时给出与“未瞄准目标”不同的提示:能看到手但看不见指尖,就说指尖被挡,不要说“没点到按钮”。
  • 验收必须包含手背朝向、侧向和逆光;这几箱达不到发布门槛时,限制捏合只能在近场掌心可见时使用,或提供非捏合的确认路径。

延伸

  • 同组C4.06.1 指尖相触自带触觉终点,起止判定比挥手类稳定 · C4.06.2 捏合可拆为进入、维持、松开三态,分别承载选择与连续调节 · C4.06.3 短捏等同于点击当前指向目标
  • 相邻C4.23 跟踪丢失的处置 · C4.31 光照、遮挡与环境条件
  • 站内检索self-occlusion · dorsal hand view · pinch tracking failure

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/C4.06.4