人类说话者帮助机器倾听者应对对话中的视觉不对称性
作者
语音用户界面(VUI)设计大语言模型(LLM)的人机协作UI/UX 设计师AI/ML 研究员与工程师
人机对话(HMD)研究探讨了该语境下语言产出的自我中心程度或他人中心程度。即一个人在多大程度上会考虑机器的角度。我们的研究旨在确定在双方可获得信息不对称时,用户在基于语音的HMD中是否产出他人中心或自我中心的语言。通过改编的指称交流任务,我们操纵了视觉干扰物和遮挡物的存在与否,与先前心理语言学研究中使用的指称任务类似。结果表明,人们对干扰物和遮挡物的存在很敏感,往往会产生更多信息性表达,以帮助机器伙伴应对视觉不对称。我们讨论了HMD中他人中心产出如何由口语HMD中劳动分工的表现所解释。这些发现进一步增进了我们对HMD中语言产出机制的理解。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 在具有视觉障碍(如干扰物或遮挡)的对话中,人类如何调整语言帮助机器理解其参考视角?分类: 不确定性传达与校准依赖同类问题arrow_forward
- 视觉歧义(如干扰物)和不确定性(如遮挡)对人类语言细致程度有何影响?分类: 不确定性传达与校准依赖同类问题arrow_forward
- 在同样视觉条件下,人与机器对话中语言表达的行为模式是否存在差异?分类: 不确定性传达与校准依赖同类问题arrow_forward
lightbulb
现实痛点
1- 智能语音助手难以理解用户在视觉障碍情况下的语言指令。分类: 不确定性传达与校准依赖同类问题arrow_forward
- 80%
使用大型语言模型实现与移动UI的对话交互
CHI '23· 语音用户界面(VUI)设计 +1
- 80%
ONYX:通过多模式交互任务学习辅助用户教授自然语言接口
CHI '23· 语音用户界面(VUI)设计 +2
- 80%
RoboClean:专业低资源环境中人机交互的语境语言接地研究
CUI '23· 语音用户界面(VUI)设计 +2
- 80%
Screen2Words:基于多模态学习的自动移动端UI摘要生成
UIST '21· 语音用户界面(VUI)设计 +1
- 75%
关于VUI准则的讨论?语音用户界面设计准则的元分析
CUI '23· 语音用户界面(VUI)设计
- 75%
单元、生成器与透镜:面向大型语言模型面向对象交互的设计框架
UIST '23· 大语言模型(LLM)的人机协作
- 67%
ReactGenie:使用大型语言模型开发复杂多模式交互的框架
CHI '24· 语音用户界面(VUI)设计 +2
- 67%
与手交谈:一个具有视觉指针作为主动伴侣的LLM驱动聊天机器人,用于屏幕任务
CHI '25· 语音用户界面(VUI)设计 +2
- 67%
VoiceAlign:一个用于增强传统语音用户界面系统可用性的自适应中间层
IUI '26· 语音用户界面(VUI)设计 +2
- 67%
"同声 不同语":支持在线会议中非母语者的语音克隆翻译探索
IUI '26· 多语言与跨文化语音交互 +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
一眼看懂
fact_check论文快照
dataset
来源
CUI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
6 位作者
sell
研究子方向
语音用户界面(VUI)设计、大语言模型(LLM)的人机协作
work
职业/产业
UI/UX 设计师、AI/ML 研究员与工程师
article
内容状态
仅摘要
hub
相关论文
10 篇相关论文