ChitChatGuide:利用大语言模型辅助视障人士探索购物中心的对话交互系统

大语言模型(LLM)的人机协作视觉障碍者技术(屏幕阅读器、触觉图形、盲文)医生、护士、临床医生辅助技术专家

为了让视障人士(PVI)能够探索购物中心,提供有关选择目的地和根据个人兴趣获取信息非常重要。我们通过集成大语言模型(LLM)与导航系统实现对话交互来实现这一目标。ChitChatGuide 允许用户通过情境对话规划行程,根据通行时间接收周围环境的个性化描述,并在导航过程中进行咨询。我们在购物中心对 11 名视障用户进行了研究,结果表明该系统让他们能够更愉快地探索设施。基于 LLM 的对话交互通过理解模糊和基于情境的问题,使参与者能够有效地探索不熟悉的环境。LLM 生成的个性和情境信息既有用又令人愉快。考虑到我们发现的局限性,我们讨论了将 LLM 整合到导航系统中以增强视障人士探索体验的标准。

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/papers/mobilehci/169567/2024

广告推荐

学习 AI 编程到 CodeNow

一眼看懂

论文快照

fact_check
dataset
来源
MobileHCI
calendar_month
年份
2024
emoji_events
奖项
未标记奖项
group
作者
7 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、视觉障碍者技术(屏幕阅读器、触觉图形、盲文)
work
职业/产业
医生、护士、临床医生、辅助技术专家
article
内容状态
仅摘要
hub
相关论文
9 篇相关论文