Sketchforme:用于交互式应用的基于文本描述生成草图场景
生成式AI(文本、图像、音乐、视频)AI 辅助创意写作创意协作与反馈系统UI/UX 设计师视觉艺术家与设计师自由职业者(设计、写作、翻译)
草图和自然语言是交互式应用的有效沟通媒介。我们介绍了Sketchforme,这是首个基于神经网络、能够根据用户指定的文本描述生成草图的系统。Sketchforme能够在未经带文本标注的草图场景数据集训练的情况下,获得对多对象草图场景的高层和低层理解。Sketchforme生成的草图表达力强且逼真:我们在用户研究中表明,这些草图在多种情况下比人工绘制的草图更能传达描述内容,且36.5%的这些草图被认为是由人类绘制的。我们使用这些生成的草图开发了多个交互式应用,并表明Sketchforme可以显著改进语言学习应用并支持智能基于语言的草图助手。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
当前问题库还没有收录这篇论文的问题与痛点。
- 100%
StyleFactory:通过风格强度控制与评估实现图像创作中更好的风格对齐
UIST '24· 生成式AI(文本、图像、音乐、视频) +2
- 83%
文本到图像实践社区研究:人们如何及为何提示生成式AI
C&C '23· 生成式AI(文本、图像、音乐、视频) +1
- 67%
FlatMagic:通过AI驱动的设计改进数字漫画专业人士的平涂上色
CHI '22· 生成式AI(文本、图像、音乐、视频) +1
- 67%
GANravel: 在生成对抗网络中用户驱动的方向解缠
CHI '23· 生成式AI(文本、图像、音乐、视频) +1
- 67%
Artinter: 委托视觉艺术的人工智能驱动边界对象
DIS '23· 生成式AI(文本、图像、音乐、视频) +1
- 67%
工具何时为工具?用户对人-AI协同创作绘画中系统代理性的感知
DIS '23· 生成式AI(文本、图像、音乐、视频) +1
- 67%
PromptPaint:通过类似绘画媒介的交互引导文本到图像生成
UIST '23· 生成式AI(文本、图像、音乐、视频) +1
- 67%
DrawTalking:通过手绘与语音构建交互式世界
UIST '24· AI 辅助创意写作 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
一眼看懂
fact_check论文快照
dataset
来源
UIST
calendar_month
年份
2019
emoji_events
奖项
未标记奖项
group
作者
2 位作者
sell
研究子方向
生成式AI(文本、图像、音乐、视频)、AI 辅助创意写作、创意协作与反馈系统
work
职业/产业
UI/UX 设计师、视觉艺术家与设计师、自由职业者(设计、写作、翻译)
article
内容状态
仅摘要
hub
相关论文
8 篇相关论文