Visual Lyrics:使用增强文本编辑器为音乐歌词视频生成动画文本Lin 等人提出 Visual Lyrics 系统,利用多模态音乐分析和 LLM 生成能力,通过增强文本编辑器帮助新手轻松创建高质量动画歌词视频。2026DLDavid Chuan-En Lin et al.卡内基梅隆大学AI 辅助创意写作视频制作与编辑创意协作与反馈系统IUI
MemoVis:基于生成式人工智能的3D设计反馈伴侣参考图创建工具Chen 等人开发 MemoVis 系统,利用视觉语言模型提供实时视角建议,结合2D生成模型将文本反馈转化为3D场景视图,显著提升反馈图像的质量和明确性。2024CCChen Chen et al.加利福尼亚大学圣地亚哥分校生成式AI(文本、图像、音乐、视频)3D 建模与动画创意协作与反馈系统UIST
PaperToPlace:将指令文档转换为空间化和上下文感知的混合现实体验Chen 等人提出 PaperToPlace 系统,将纸质指令转换为空间化 MR 体验,通过机器学习提取步骤空间位置,实现指令的最佳放置以减少上下文切换并提供免提交互。2023CCChen Chen et al.加利福尼亚大学圣地亚哥分校混合现实工作空间环境感知与上下文计算UIST
GestureCanvas:用于原型设计 VR 复合自由手势交互的编程演示系统Sayara 等人提出 GestureCanvas 系统,利用事件驱动状态机、触发-动作创作和编程演示,实现 VR 复合自由手势交互的无代码快速原型设计与部署。2023ASAnika Sayara et al.不列颠哥伦比亚大学手部手势识别全身交互与体感输入混合现实工作空间UIST
PoseVEC:使用视觉编程与演示创作自适应姿态感知效果Zhang等人提出PoseVEC视觉编程系统,结合演示编程范式简化姿态触发器创建、动画参数设计和渲染三项任务,使新手能高效创作自适应姿态感知效果。2023YZYongqi Zhang et al.乔治梅森大学人体姿态与行为识别3D 建模与动画众包任务设计与质量控制UIST
PointShopAR:使用增强现实中的点云支持环境设计原型制作Wang等人设计PointShopAR系统,利用点云支持AR环境设计原型制作,整合捕获与编辑工作流,支持选择、变形等操作,通过远程和现场研究验证其实用性2023ZWZeyu Wang et al.香港科技大学AR 导航与情境感知原型设计与用户测试CHI
Rapido:通过编程演示创建交互式AR体验的原型设计Leiva 等人开发 Rapido 工具,通过编程演示将视频原型转换为可执行状态机,使非程序员能快速创建交互式移动 AR 原型并应用于三款主流应用。2021GLGermán Leiva et al.奥胡斯大学AR 导航与情境感知原型设计与用户测试UIST
DistanciAR:为远程环境创作场地特定的增强现实体验Wang等人提出DistanciAR远程AR创作工作流程,基于LiDAR捕捉远程环境并添加Dollhouse和Peek模式,使远程场景理解与导航更便捷2021ZWZeyu Wang et al.香港科技大学AR 导航与情境感知混合现实工作空间数字艺术装置与交互表演CHI
TransceiVR: 弥合外部用户与VR用户之间的不对称通信Kumaravel 等人开发 TransceiVR 系统,通过VR平台API实现外部用户与VR用户之间的不对称通信,支持场景探索、深度标注和共享显示,显著提升了远程协作的效率与成功率。2020BKBalasaravanan Thoravi Kumaravel et al.加利福尼亚大学VR 中的社交与协作混合现实工作空间UIST
360°虚拟现实视频的视图依赖效果Hartmann 等人提出在360°视频中通过空间关键帧插值实现视图依赖效果的方法,头显内置创作工具可配置参数,为电影创作带来新体验。2020JHJeremy Hartmann et al.滑铁卢大学沉浸感与临场感研究360° 视频与全景内容UIST
Pronto:使用草图和执行的快速增强现实视频原型设计Leiva 等人开发PRONTO视频原型系统,支持3D空间捕捉与2D草图定位,观察表明该系统易于使用且鼓励设计探索。2020GLGermán Leiva et al.奥胡斯大学混合现实工作空间原型设计与用户测试CHI
VR中多模态异步协作的挑战与设计考量Chow 等人通过15人参与的需求发现研究,揭示了多模态异步VR协作中近体行为协调、3D场景变更追踪、视角控制和多模态录像导航四项核心设计挑战,并提出相应设计建议。2019KCKevin Chow et al.不列颠哥伦比亚大学VR and immersive interfacesCSCW
TutoriVR:虚拟现实设计应用的基于视频的教程系统Kumaravel 等人开发TutoriVR系统,通过在VR环境中提供3D情境辅助解决视频教程无法传达VR空间操作细节的问题,初步评估获积极反馈2019BKBalasaravanan Thoravi Kumaravel et al.加利福尼亚大学VR 中的社交与协作音乐创作与声音设计工具CHI
立体VR视频界面的深度冲突减少Nguyen 等人针对立体VR视频中UI与视频深度冲突问题,提出动态调整UI深度和视频模糊光环两种技术,并在字幕观看和视频搜索任务中验证有效性。2018CNCuong Nguyen et al.奥多比沉浸感与临场感研究360° 视频与全景内容CHI