基于大语言模型的现实世界上下文与任务辅助创作
大语言模型(LLM)的人机协作环境感知与上下文计算软件工程师与开发者AI/ML 研究员与工程师
人工智能的进步使得协助具有高度多样化和个性化需求的用户成为可能,但这些系统所能提供的广泛协助类型给用户如何向系统指定目标带来了挑战。为支持现实世界任务的AI辅助创作,我们提出了情境驱动提示(CDPs)概念,定义了AI助手应如何响应现实世界上下文。我们实现了一个用于创作和执行CDPs的原型系统,该系统提供建议以协助用户找到适合其目标的协助级别。我们还进行了用户研究(N=10)以探究参与者如何表达和优化现实世界任务的目标。研究结果揭示了多种借助建议启动和优化CDPs的策略,并为未来创作界面的设计提供启示。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 如何使用户能够便捷地定义复杂任务目标,同时让系统理解并执行基于上下文的任务?分类: 多模态感知与跨通道理解同类问题arrow_forward
- 上下文驱动的结构化自然语言提示(CDPs)是否能够提高用户设计智能助手任务的能力?分类: 多模态感知与跨通道理解同类问题arrow_forward
- 视觉语言模型(VLMs)如何帮助智能助手更好地理解用户环境中的视觉信息以支持任务设计?分类: 多模态感知与跨通道理解同类问题arrow_forward
lightbulb
现实痛点
1- 用户难以高效表达复杂目标,智能助手无法充分支持日常任务。分类: 多模态感知与跨通道理解同类问题arrow_forward
- 67%
VisionTasker:基于视觉UI理解与LLM任务规划的移动端任务自动化
UIST '24· 大语言模型(LLM)的人机协作 +2
- 60%
深度热成像:通过深度学习空间表面温度模式识别野外近似材料类型
CHI '18· 生物传感器与生理监测 +1
- 60%
自动类发现和单次交互用于声学活动识别
CHI '20· 人体姿态与行为识别 +1
- 60%
在配对编程环境中用代理替代人类的权衡:好的、坏的和丑的
CHI '21· 大语言模型(LLM)的人机协作 +1
- 60%
大规模可视化深度神经网络示例
CHI '21· 大语言模型(LLM)的人机协作 +1
- 60%
使用生成语言模型发现自然语言编程的语法和策略
CHI '22· 生成式AI(文本、图像、音乐、视频) +1
- 60%
AI Chains:通过链接大型语言模型提示实现透明且可控的人机交互
CHI '22· 大语言模型(LLM)的人机协作 +1
- 60%
通过数据工作的工件追踪和可视化人与ML/AI的协作过程
CHI '23· 大语言模型(LLM)的人机协作 +1
- 60%
在人工智能中介沟通中比较句子层面的建议和消息层面的建议
CHI '23· 大语言模型(LLM)的人机协作 +1
- 60%
《它想让我怎么说》:弥合最终用户程序员与代码生成大型语言模型之间的抽象差距
CHI '23· 生成式AI(文本、图像、音乐、视频) +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3708359.3712164
一眼看懂
fact_check论文快照
dataset
来源
IUI
calendar_month
年份
2025
emoji_events
奖项
未标记奖项
group
作者
5 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、环境感知与上下文计算
work
职业/产业
软件工程师与开发者、AI/ML 研究员与工程师
article
内容状态
仅摘要
hub
相关论文
10 篇相关论文