C4.31.3Occlusion in mid-air tracking设计研究
障碍物或其他人体造成的遮挡会中断连续动作的追踪
别名: 遮挡 · 障碍物 · 其他人体
概念解释
相机与手之间插进杯子、屏幕边框、自己的另一只手、或另一个人的身体，光学追踪就断一截。遮挡中断的是连续动作的追踪，不是分类器忽然不认识这个姿态。家具和人群是场地里会反复出现的遮挡源。怎么冻结、怎么宽限，是丢失之后的政策；这里要的是：遮挡作为环境条件，会把正在进行的轨迹切碎。
机制
单目或单深度相机沿视线积分，前面的不透明物吃掉后面的像素。自遮挡在空中特别密：翻掌、双手配合、把物体递到身前。他人遮挡的时长由走过去的速度决定，家具遮挡则只要人一站到柱子后面就持续。连续动作（刮擦、维持捏合）依赖时间上相邻的关键点；中间缺一段，积分器要么停，要么用错误的外推把值带走。静态点选偶尔能在遮挡缝里「碰中」一次，连续任务不行。多相机能减少死角，但接缝本身又是一类遮挡边界。透明或反光的障碍（玻璃、屏幕）会造成假表面，比完全挡住更难查。
怎么研究
在连续刮擦任务里插入可重复的遮挡：纸板、走过的助手、操作者自己的非主导手。测量轨迹断裂长度、值漂移、任务失败。比较单相机与双相机、比较有无预测外推。把家具按真实场地摆进实验室，让人在柱后完成任务，而不是只在空桌子前测。自遮挡要按词汇里真实会出现的翻掌来设计，不要只用正面张开的手。
边界
穿戴式惯性或手套在光学遮挡时仍可能给出相对运动，光学中断不等于通道全死。透视雷达能穿过部分遮挡，精度和手部细节通常不够连续精细任务。完全开放的空房间遮挡少，得出「连续追踪很稳」会在一摆上桌子之后翻盘。儿童身高让成人尺寸的桌子变成全身遮挡。跟踪丢失之后怎么处置，不能从「遮挡会发生」直接推出，那是另一组决策。
怎么落地
- 在场地平面图上标出相机视线会被桌、柱、人流切断的区域，交互区不要跨过这些切线。
- 词汇避免必须以自遮挡才能完成的动作（手背完全挡住手指还要认指型）。
- 验收在真实家具和过道里做连续刮擦，而不是在空的拍摄棚。轨迹在遮挡处碎掉是环境问题，先改安装再改模型。