X7.03.3Visual substitution for missing haptics设计研究

无触觉时需要视觉替代指示

别名: 视觉力反馈 · sensory substitution

概念解释

当远程操作系统不具备力反馈硬件条件时,需要用视觉替代指示(visual substitution)来传达本该由触觉承载的接触信息,比如用力值的柱状图、颜色编码的接触状态、形变的可视化渲染。

机制

视觉替代之所以可行但不完美,是因为触觉信息在转换为视觉符号后,失去了触觉本身的直接性和高带宽——触觉反馈是操作者手部肌肉直接感知的连续物理量,反应速度快且不占用视觉注意资源,而视觉替代指示需要操作者主动把视线从任务画面移开去读取一个额外的图表或指示灯,这占用了原本就紧张的视觉注意资源,并且存在读取延迟。这意味着视觉替代永远是次优方案,只有在硬件成本或系统复杂度不允许力反馈时才作为补偿手段——它解决的是"完全没有接触信息"和"有一些接触信息"之间的差距,而不是"视觉替代"和"真实力反馈"之间的差距。听觉替代(用音高或提示音编码力的大小)是另一种可选的非触觉通道,和视觉替代相比,它不占用视觉注意资源,但传达的信息维度有限,通常只能编码单一标量而不能像视觉那样同时表达方向和幅度,两者不是互斥关系,可以按任务需要组合使用。

怎么研究

常见做法是对比"完全没有接触信息""视觉替代指示""真实力反馈"三种条件下的任务表现,验证视觉替代能在多大程度上缩小与真实力反馈之间的差距,以及不同视觉编码方式(数值读数、颜色渐变、形变动画)哪种更容易被操作者快速读取而不干扰主任务视觉注意。这类研究通常还要检验力值的估计来源是否可靠——很多系统里显示的"力"其实是模型估计而非直接测量,估计误差会直接影响视觉替代的可信度。

边界

视觉替代指示的有效性受限于操作者视觉注意力本就被主任务画面占满的程度——如果主任务本身就需要高度视觉专注(比如精细导航),再额外增加一个需要读取的视觉指示反而可能分散注意力造成负面效果。这条方案更适合视觉负荷相对宽松、有余量分配额外注意资源的任务。色觉缺陷、显示延迟以及操作者视线离开屏幕的情况都会让视觉替代直接失效,这些是它区别于触觉反馈(不占用视觉通道)的根本弱点。头戴式显示与桌面显示器之间也存在边界差异:头戴设备的视野本身有限,叠加一个额外的力值指示更容易遮挡任务画面,而桌面显示器通常有更多空闲的画面边缘区域可以安置这类指示。

怎么落地

在预算或硬件条件不支持力反馈的系统里,优先设计不占用中央视觉注意力的替代方案(如画面边缘的颜色变化、外周视觉可感知的指示,而不是需要专门读取数值的图表),并把接触状态的视觉指示放在操作者视线自然扫过的位置。要在界面上明确标注该力值是实测还是模型估计,避免操作者把估计误差当成真实接触状态。验证办法是测试加入视觉替代指示前后,操作者在接触相关任务上的表现是否有改善,同时用眼动追踪或双任务范式检查该指示是否显著占用了原本用于主任务的视觉注意资源。

延伸

  • 同组:X7.03.1 力反馈补偿视觉不足 · X7.03.2 回传延迟会造成振荡
  • 相邻:X7.02 延迟下的控制 · X7.01 情境感知的缺失
  • 站内检索:sensory substitution · haptics · teleoperation · visual feedback

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/X7.03.3