艺术家对虚拟现实3D素描自然交互的视角

文献标题

An Artists’ Perspectives on Natural Interactions for Virtual Reality 3D Sketching

文献信息

• 主题领域: 人机交互与虚拟现实艺术创作
• 关键词: Virtual Reality, Gestures, Speech, Multimodal Interaction, 3D Sketching

研究背景与问题

• 发现的挑战:

  • 当前3D虚拟现实（VR）艺术创作工具多局限于单一的输入模式（例如使用手持控制器），未充分利用VR的沉浸式特性。
  • 缺乏对专业艺术家的需求和偏好的深入研究以改进VR 3D草绘系统。
  • 3D草绘相比传统2D绘画更复杂，艺术家需要处理深度、空间和复杂的透视关系，这对交互设计提出了更高的要求。

• 重要性:

  • 提升3D草绘应用的自然交互性可以降低认知负荷、增加工具的直观性和沉浸感。
  • 进一步提高艺术家与数字创作工具的适配性可以帮助其更好地表达创意，增强VR在创意设计领域的应用。

• 研究动机与相关工作:

  • 作者通过评估现有商业3D草绘系统的工具和交互模式，提出开发自然单模态与多模态交互技术的意义。
  • 相关研究曾重点探讨单一模式的交互（例如手势或语音输入），但很少涵盖艺术家偏好的多模态交互。

解决方案

• 提出的方法:

  • 基于艺术家视角设计推荐自然交互方式（例如增加手势、语音、双手交互等输入方式），并探索现有工具的改进。
  • 通过半结构化访谈与实验研究，收集艺术家对现有3D草绘系统的意见与改进建议。

• 创新之处:

  • 推广多模态交互，将手势与语音、眼动等结合应用于VR 3D草绘。
  • 提出具体工具优化建议，例如“消失式菜单”、“简化的选择工具”等以优化用户体验并提升交互效率。
  • 将传统2D绘画功能与创作习惯迁移至3D VR环境。

• 实施步骤与技术:

  • 使用OpenBrush（一种开源VR绘画工具）进行实验设计。
  • 采访13位艺术专业学生，就其创作过程中的交互习惯与需求进行质性分析。
  • 综合分析用户的物理动作、语音指令及思维表达，结合系统使用性量化评估（SUS）。

研究成果

• 具体成果:

  • 发现通过多模态交互技术（如手势与语音点选相结合）、逼真几何形状生成和艺术家习惯的延续，可以显著改善VR 3D草绘的用户体验。
  • 挖掘出艺术家群体对工具的特定需求，例如生成和填充形状、线条美化、分割笔触等高级功能。

• 优势:

  • 与现有单模态交互系统相比，多模态交互能更直观地满足艺术家的创作需求，提高用户沉浸感与生产效率。
  • 开发的改进建议针对艺术家，而非普通用户，为VR艺术创作提供专业化支持。

• 实验及评估结果:

  • 通过系统使用性量表（SUS），OpenBrush获得平均评分为77（满分100），体现其用户体验高于平均水平。
  • 定性分析揭示了艺术家对于工具功能与交互设计的多样化建议，例如采用语音、手势、双手甚至人工智能辅助创作。

• 局限性与未来方向:

  • 受限于参与者的年龄范围（20-28岁）及其VR经验水平，难以全面反映专业艺术家群体的需求。
  • 当前实验时间较短，未来工作应延长绘制时间并采用多期实验，以提升数据质量。
  • 建议扩展研究至不同文化及经验背景的艺术家群体，探索区域或年龄差异对交互方式的影响。

总结与推荐

• 关键建议:

  • 进一步开发VR硬件，提高设备对艺术家个性化需求的适配，例如不同尺寸或特定用途的控制器设计。
  • 增加语音、手势、眼动追踪等自然交互方式，并允许艺术家根据个人偏好选择。
  • 开发类似桌面绘图工具功能（如形态生成、美化功能、分割功能），以更好地支持艺术家的创作流程。

• 未来方向:

  • 长期积累艺术家用户数据，以便深入了解多模态交互技术在VR创意艺术中的最佳应用场景。
  • 探讨基于人工智能的创作辅助工具，提升艺术家在3D草绘中的创意表达能力。