C4.31.1Ambient lighting effects on gesture recognition设计研究
视觉类手势识别的可靠性随环境光照强度和方向变化
别名: 环境光照 · 强度与方向 · 视觉识别可靠性
概念解释
靠相机看手的系统,识别率不是设备常数,它随环境光的强度和方向一起变。同一套模型,正午窗边和傍晚顶灯下会给出不同的关键点质量和分类分数。方向与强度同等重要:同样「够亮」,侧光、顶光、逆光画出的阴影和过曝区不同。这是视觉通道的物理依赖,不是用户手势突然变差。
机制
RGB 手部关键点吃的是表面反射。照度低,信噪比掉,边缘糊;照度高且方向刁,高光抹掉指缝,阴影把两根手指粘成一根。主动红外深度相机看起来「不怕可见光」,仍怕太阳里的红外和某些卤素灯的红外噪声,深度图在窗边变脏。光的方向还决定哪只手的哪一面朝相机是亮的:侧光让朝向镜头的掌面欠曝。可靠性曲线因此是场景的函数:同一设备在实验室均匀顶光下的数字,不能代表它在有窗户的房间里的数字。一天之内太阳方位变化,曲线还会自己走。
怎么研究
在可控灯具下扫照度(例如从几十到几千 lux)和若干方向(正、侧、逆、顶),对同一批动作记录关键点误差和手势准确率。再在真实有窗的房间里按时刻采样。分别测 RGB 管线和红外深度管线,不要混成「视觉」一个数。报告应带光照条件,而不是只报一个总体准确率。把灯的光谱也记下来,因为红外干扰与 lux 读数不是一回事。
边界
数据手套、超声波、毫米波雷达不靠这种表面反射,光照曲线对它们几乎平。头显内向外追踪有自己的补光,对房间灯的依赖低于桌面相机,但仍可能被正对的强光打花。舞台频闪和迪斯科灯会造成与稳态光照不同的失败,实验室的恒定灯扫不到。色温变化对有的模型影响大,对只吃深度的管道影响小。
怎么落地
- 把目标场地的昼夜光照写进需求,而不是只写「室内」。
- 选型时分别问清 RGB 与红外在窗边的表现,不要只看实验室参数。
- 验收在目标房间的最亮和最暗常用时段各跑一遍核心手势;只在窗帘拉上的会议室过关,不等于光照可靠。