迷失在说明书之中：视障用户使用DIY手册和AI重写说明书进行组装、操作和故障排除的体验研究

文献标题

Lost in Instructions: Study of Blind Users’ Experiences with DIY Manuals and AI-Rewritten Instructions for Assembly, Operation, and Troubleshooting of Tangible Products

出版信息

• 主题领域: 面向盲人用户的DIY任务无障碍与辅助技术。
• 关键词: 盲人用户, DIY任务, AI工具, 产品手册, 无障碍性, 空间推理, 故障排除, 装配, 非视觉指导, 辅助技术。

背景与问题

• 问题/挑战: 盲人用户在访问和理解DIY任务的产品手册时面临重大挑战，这些手册通常以视觉为中心。尽管AI工具具有潜力，但它们往往无法提供可操作的非视觉指导，从而加剧了这些困难。
• 重要性: 提供有效的解决方案对于帮助盲人用户独立完成产品的装配、操作和故障排除至关重要，这能够增强其自主性并减少对有视力人士的依赖。
• 动机与相关研究: 先前的研究已探索AI工具在导航、烹饪和一般信息访问中的应用，但尚未充分研究其在基于产品手册的DIY任务中的作用。现有工具通常依赖视觉参考，缺乏为盲人用户提供必要的触觉、空间和方向提示。

解决方案

• 提出的方法: 通过访谈和可用性研究系统性地调查盲人用户对产品手册和AI工具的使用体验，识别问题并提出设计改进建议。
• 创新点:
  1. 对盲人用户在DIY任务中使用AI工具和产品手册的交互进行实证研究。
  2. 识别具体挑战，包括以视觉为默认的偏见、不一致的指导以及AI生成指令中的“幻觉”问题。
  3. 提出结构化、分层的指令模板以及针对产品手册和AI工具的设计建议。
• 程序和关键技术:
  • 对15名盲人参与者进行了半结构化访谈，以捕捉其实际体验和挑战。
  • 对7名参与者进行了可用性研究，观察他们使用AI工具和手册执行DIY任务的实时表现。
  • 使用主题编码和任务完成率、准确性、工作负荷（NASA-TLX）等指标分析数据。

结果

• 具体发现:
  • 任务完成率仅为2.4%，所有任务的步骤准确率低于50%。
  • AI工具经常默认提供以视觉为中心的指导，忽略触觉和空间提示，并在64%的响应中出现步骤或组件的“幻觉”。
  • 参与者依赖于零散的资源（手册、AI工具、教程），但仅有10%的情况下能够独立完成任务。
• 相较基线的优势:
  • 结构化、分层的指令将澄清需求减少了80%，相比AI生成的指导更具优势。
  • 针对产品手册和AI工具的建议有望提高无障碍性和独立性。
• 实验/评估:
  • 任务包括使用纸质、PDF和网页手册进行产品的装配、操作学习和故障排除。
  • 评估指标包括任务完成率、步骤准确率、人为干预次数和感知工作负荷（NASA-TLX）。
• 局限性与未来工作:
  • 样本量较小，可能低估了新手或非英语用户的情况。
  • 研究集中于当前的AI工具，未来模型可能会改变观察到的模式。
  • 实验室研究可能无法完全反映真实世界的动态。

总结

本研究突出了盲人用户在基于产品手册的DIY任务中面临的持续挑战，包括对视觉参考的依赖、不一致的AI指导以及零散的支持资源。尽管这些工具的重要性显而易见，但手册和AI工具往往无法提供可操作的非视觉指令，迫使用户依赖教程或有视力人士的帮助。研究结果为产品制造商和AI开发者提供了设计建议，强调采用结构化、分步指导，并结合触觉、空间和方向提示，以支持更准确和独立的任务完成。未来工作应扩大参与者的多样性，测试更广泛的产品类别，并原型化实现这些建议的系统。