FocusFlow:利用主动视觉深度操作在虚拟现实中的3D凝视-深度交互
眼动追踪与注视交互沉浸感与临场感研究UI/UX 设计师HCI 研究员
文献标题
FocusFlow: 3D Gaze-Depth Interaction in Virtual Reality Leveraging Active Visual Depth Manipulation
文献信息
- 主题领域: 虚拟现实中的注视深度与交互设计
- 关键词: 注视交互, 视觉深度, 虚拟现实, 3D用户界面, 眼动追踪
研究背景与问题
-
研究问题与挑战:
- 当前基于注视的虚拟现实 (VR) 交互主要利用注视方向信息,而忽略了视觉深度这一潜在的输入维度。
- 存在“米达斯之触”问题,即无法区分有目的的注视输入与非故意的注视停留。
- 注视深度作为交互输入存在可用性与可学性问题,尤其是在距离远时,视觉深度估计的准确性和稳定性会降低。
-
研究动机与意义:
- 人眼的自然深度调节行为提供了一个直观且未被充分利用的输入维度,可用于改进手势交互或多模态系统。
- 为解决“米达斯之触”问题,同时提高交互的直觉性和学习效率。
-
相关工作:
- 之前的研究探索了注视深度在选择不同虚拟物体或深度层上的应用,但这些解决方案普遍缺乏有效的用户教育流程和稳定的视觉深度控制机制。
解决方案
-
方法与核心创新:
- FocusFlow 方法:提出了一种基于注视深度的免手操作交互方法,通过人类视觉深度感知行为实现VR交互设计。
- 层级化用户界面:将交互内容组织成不同深度层的透明“虚拟窗口”,基于用户的视觉深度调整动态可见性。
- 学习过程与视觉提示:设计两种学习策略(渐进学与自适应学),通过视觉提示帮助用户掌握注视深度控制并逐步建立肌肉记忆。
-
实施步骤与关键技术:
- 注视深度检测:
- 利用现有VR头显中的眼动追踪功能计算视线深度。
- 通过移动平均算法对深度抖动进行去噪,显著提高信号的可用性。
- 界面设计与交互逻辑:
- 提出“虚拟窗口”交互组件,用户通过改变视线深度激活窗口,从而实现目标选择、快速预览与安全激活等功能。
- 自适应学习策略:
- 通过透明度动态变化的视觉标记引导用户感知和调整注视深度。
- 提供反馈机制并逐步减小深度指导范围,最终去除提示,帮助用户建立自然的深度控制。
- 注视深度检测:
研究成果
-
具体成果:
- 提出了支持注视深度交互的层级化UI设计,解决了“米达斯之触”问题。
- 开发了三种视觉提示和两种学习策略,验证了用户快速掌握注视深度交互方法的能力。
- 成功实现了免手操作的目标选择、快速预览和安全激活功能。
-
实验及评估结果:
- 在24名参与者的用户研究中,用户能快速学会注视深度交互方法:
- 自适应学习策略提升了用户迁移到无提示操作的熟练度,错误率下降,激活时间缩短至1.3秒。
- 相较于传统的驻留时间方法(dwell-time),FocusFlow的交互效率更高,误触率降低,仅约5%。
- 然而,注视深度交互可能导致更明显的眼睛疲劳,尤其在长时间频繁使用的情况下。
- 在24名参与者的用户研究中,用户能快速学会注视深度交互方法:
-
优势比较:
- FocusFlow在效率(平均激活时间更短)和误触率(比传统方法更低)方面表现优异,同时以自然且直观的方式解决了“米达斯之触”问题。
- 与传统方法相比,FocusFlow支持更自由的观察体验,避免了因驻留而中断的操作过程。
-
局限性与未来方向:
- 统计显著性分析: 当前实验人数较少,需在更大规模用户中进行长期评估以验证广泛适用性。
- 多模态拓展: 探索视觉深度与其他输入(如眨眼、手势)的结合。
- 连续输入维度: 探索视线深度变化作为连续操作输入维度的潜力(如页面滚动、3D物体旋转)。
- 动态深度自适应: 根据目标物体所处距离动态调整虚拟窗口深度,提升用户体验。
- 更广泛应用场景: 引入“透视”应用(例如医学培训中的多层观察)等新交互机制。
总结
FocusFlow提出了创新性的基于注视深度的交互方法,将人类视觉系统的自然特性转化为虚拟现实中的直观输入手段。结合理论分析、用户研究和实验验证,该方法展示了广阔的潜力,特别是在解决传统注视交互中的挑战时。这项工作为未来研究提供了理论基础和方向,将进一步推广这一用户友好的交互方式。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 如何利用视觉深度来改进虚拟现实中的凝视交互体验?分类: XR眼动追踪与凝视交互同类问题arrow_forward
- 如何设计学习策略帮助用户掌握基于凝视深度的交互方式?分类: XR眼动追踪与凝视交互同类问题arrow_forward
- 透明“虚拟窗口”界面能否有效减少虚拟现实交互中的“米达斯触碰”问题?分类: XR眼动追踪与凝视交互同类问题arrow_forward
lightbulb
现实痛点
1- 现有头戴式VR设备的凝视交互易触发误操作,用户学习成本高分类: XR眼动追踪与凝视交互同类问题arrow_forward
- 100%
虚拟现实中的物理键盘:打字性能分析及角色手部影响
CHI '18· 眼动追踪与注视交互 +1
- 100%
DEEP:利用眼睑运动的虚拟现实三维注视点交互技术
UIST '22· 眼动追踪与注视交互 +1
- 80%
复杂世界中的搜索:混合现实中的视觉搜索与空间规律记忆
CHI '26· 沉浸感与临场感研究 +2
- 80%
眼动-头动连续体:虚拟现实中个体与群体头部运动倾向的建模
CHI '26· 沉浸感与临场感研究 +2
- 80%
少即是多!动态环境中自下而上与自上而下注意力的视觉抑制
CHI '26· 沉浸感与临场感研究 +2
- 80%
利用虚拟现实中的眼动动态检测输入识别错误和用户错误
UIST '22· 眼动追踪与注视交互 +2
- 75%
使用心理物理学方法解释基于凝视的选择任务中类似菲茨定律的表现
CHI '19· 眼动追踪与注视交互
- 75%
RetroSketch:一种用于测量虚拟现实中情感和临场感的回顾性方法
CHI '25· 沉浸感与临场感研究
- 67%
理解用于现场展览的手持式HMD的VR指向方法的可用性
CHI '25· 眼动追踪与注视交互 +2
- 67%
Motion-Touch:基于运动学的自适应切换通过目标预测增强虚拟手选择
CHI '26· 沉浸感与临场感研究 +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3613904.3642589
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2024
emoji_events
奖项
未标记奖项
group
作者
4 位作者
sell
研究子方向
眼动追踪与注视交互、沉浸感与临场感研究
work
职业/产业
UI/UX 设计师、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文