WanderGuide：为盲人探索设计的室内无需地图的机器人向导

研究背景与问题

• 作者发现的问题或挑战： 现有的导航系统通常依赖于预定义的地图和基础设施，这使得在完全未知的环境中部署成本高昂且难以实现。此外，许多系统专注于目标导向的导航，而非鼓励自主探索，这限制了盲人用户发现新环境的可能性。

• 为什么这个问题很重要： 自主探索对盲人用户的日常生活和社会参与至关重要。这不仅提高了用户在环境中的自由度和独立性，还能够为其创造更愉悦的体验，而现有系统难以满足这一核心需求。

• 研究动机与相关工作： 现有研究多集中于帮助盲人到达特定地点的导航任务（例如通过预建地图或传感器），但鲜少关注盲人用户自发探索环境的需求。进一步地，仅少量导航系统具备多用途或者感知能力，而类似WanderGuide这样的无地图导航和探索系统设计空间仍然未被深度研究。

解决方案

• 作者提出的方法和解决方案： 作者开发了一个名为WanderGuide的机器人导航系统，它无需依赖预定义地图并主要专注于探索功能。系统能够通过真实场景描述和问答互动为盲人提供环境信息，同时还支持用户控制机器人行进方向以及到达指定地点。

• 创新之处：

  • 无地图系统：WanderGuide实现了环境中路径点的自动检测，突破了传统导航系统对地图和基础设施的依赖。
  • 个性化探索体验：系统根据用户偏好提供三种场景描述模式（详细模式、平衡模式和简洁模式），并能通过问答形式提供深度交互。
  • 综合功能集成：结合自动化导航、路径点选择、障碍物避让以及多模态大语言模型（MLLM），提升了系统在室内探索任务中的能力。

• 实施步骤和关键技术：

  1. 选择基于轮式机器人作为硬件平台，以自动导航和避障为基础。
  2. 使用SLAM（同步定位与建图）算法构建实时环境成本地图，通过角点检测和聚类算法选择路径点。
  3. 集成多模态大语言模型（MLLM）用于生成实时场景描述，并提供问答互动功能。
  4. 实现用户界面，通过按钮或语言交互调整导航速度、场景描述细节以及探索模式。

研究成果

• 具体成果：

  • 开发完成功能齐备的无地图探索系统，该系统能够满足盲人用户在室内环境中的探索需求。
  • 系统支持用户在不同偏好和场景需求下，动态调整描述细节与导航模式。
  • 提供“带我去那里和问答互动功能”，显著增强了用户的探索自由度。

• 与现有解决方案相比的优势：

  • 不依赖复杂的地图构建和基础设施，使其在多变的新环境中具有更强的适应性。
  • 能够根据用户偏好提供适合的场景描述和问答互动，增加了个性化体验。
  • 支持完全独立探索，无需依赖人类辅助。

• 实验或评估结果：

  • 通过两轮用户研究，确认系统在科学博物馆和商场中的有效性。研究发现用户对无目标的自由探索体验以及个性化场景描述表示高度认可。
  • 系统取得中等到高的用户可用性评价（SUS评分均超过70），同时在工作负载评价（TLX）中表现为低负担。

• 局限性与未来方向：

  • 局限性：
    • 系统在识别和描述具体物品或位置名称时存在错误，尤其是在复杂场景中多模态语言模型（MLLM）面临性能瓶颈。
    • 缺乏声音源的识别功能，无法进一步增强用户在音频丰富场景中的探索能力。
    • 实验环境主要为室内空间，未来需研究该系统在更复杂环境（例如带楼梯或拥挤区域中的表现）。
  • 未来方向：
    • 超越视觉信息，集成音频识别功能和多模态数据处理能力。
    • 优化硬件配置，例如选用抗运动模糊的相机以及高精度传感器。
    • 扩展系统在不同文化语境和多样化场景中的应用研究，并对长期使用者进行跟踪实验以评估使用习惯变化。

通过研究，WanderGuide展示了一种新型无地图机器人系统，为盲人用户的独立探索提供了强有力支持，同时启发了未来技术与设计的多种可能性。