C4.31.1Ambient lighting effects on gesture recognition设计研究

视觉类手势识别的可靠性随环境光照强度和方向变化

别名: 环境光照 · 强度与方向 · 视觉识别可靠性

概念解释

靠相机看手的系统,识别率不是设备常数,它随环境光的强度和方向一起变。同一套模型,正午窗边和傍晚顶灯下会给出不同的关键点质量和分类分数。方向与强度同等重要:同样「够亮」,侧光、顶光、逆光画出的阴影和过曝区不同。这是视觉通道的物理依赖,不是用户手势突然变差。

机制

RGB 手部关键点吃的是表面反射。照度低,信噪比掉,边缘糊;照度高且方向刁,高光抹掉指缝,阴影把两根手指粘成一根。主动红外深度相机看起来「不怕可见光」,仍怕太阳里的红外和某些卤素灯的红外噪声,深度图在窗边变脏。光的方向还决定哪只手的哪一面朝相机是亮的:侧光让朝向镜头的掌面欠曝。可靠性曲线因此是场景的函数:同一设备在实验室均匀顶光下的数字,不能代表它在有窗户的房间里的数字。一天之内太阳方位变化,曲线还会自己走。

怎么研究

在可控灯具下扫照度(例如从几十到几千 lux)和若干方向(正、侧、逆、顶),对同一批动作记录关键点误差和手势准确率。再在真实有窗的房间里按时刻采样。分别测 RGB 管线和红外深度管线,不要混成「视觉」一个数。报告应带光照条件,而不是只报一个总体准确率。把灯的光谱也记下来,因为红外干扰与 lux 读数不是一回事。

边界

数据手套、超声波、毫米波雷达不靠这种表面反射,光照曲线对它们几乎平。头显内向外追踪有自己的补光,对房间灯的依赖低于桌面相机,但仍可能被正对的强光打花。舞台频闪和迪斯科灯会造成与稳态光照不同的失败,实验室的恒定灯扫不到。色温变化对有的模型影响大,对只吃深度的管道影响小。

怎么落地

  • 把目标场地的昼夜光照写进需求,而不是只写「室内」。
  • 选型时分别问清 RGB 与红外在窗边的表现,不要只看实验室参数。
  • 验收在目标房间的最亮和最暗常用时段各跑一遍核心手势;只在窗帘拉上的会议室过关,不等于光照可靠。

延伸

  • 同组C4.31.2 强逆光或过暗环境会显著降低骨架与手部关键点识别精度 · C4.31.3 障碍物或其他人体造成的遮挡会中断连续动作的追踪 · C4.31.4 环境条件的影响应在部署前用目标场景的真实光照测试,而非实验室理想光照
  • 相邻C4.23 跟踪丢失的处置 · C4.13 全身姿态与骨架追踪
  • 站内检索ambient light · illumination direction · RGB versus IR

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/C4.31.1