从文本到动作:基于大语言模型的群体用户接口赋能具身交互叙事Wang 等人提出 PuppetLine 系统,利用大语言模型将自然语言叙事转换为桌面机器人的协调动作表演,为群体用户接口的叙事设计提供新思路。2026RWRuhan Wang et al.Tsinghua University智能可视化与数据叙事IUI
DuoMorph:FDM打印与气动驱动的协同集成用于形状变化界面Li 等人提出DuoMorph方法,将FDM打印与气动驱动协同集成,通过单一流程制造形状变化界面,定义了四原语类别的设计空间并提供设计工具支持。2026XLXueqing Li et al.Tsinghua university形变系统CHI
从拆卸视频生成人工智能驱动的增强现实重组指导以支持日常维修Deng 等人提出RePairAR系统,利用多模态大型语言模型直接从拆卸视频生成AR重组指导,显著降低维修新手感知时间需求并提升自我效能感。2026WDWenjing Deng et al.Tsinghua University正念、呼吸与生物反馈技术CHI
GestuProp:基于协同手势的3D虚拟现实道具生成系统Yao 等人提出 GestuProp 系统,利用协同手势驱动VR中3D道具生成,通过30人形成性研究和14人用户实验验证可用性,为手势-语音协同的沉浸式交互设计提供新思路。2026ZYZhihao Yao et al.Tsinghua UniversityVR 与游戏的新路径:神经多样性、实体交互、福祉等CHI
长期情绪调节设计:面向强制性隔离戒毒中心女性的呼吸生物反馈游戏Chen 等人设计了一款针对女性戒毒者的呼吸生物反馈游戏,六周对照研究表明其有效改善情绪调节和技能向日常生活的转移,为封闭环境中长期技能干预提供新方法。2026QCQi Chen et al.Wuhan Textile UniversityVR 与游戏的新路径:神经多样性、实体交互、福祉等CHI
MorphingSkin:一种基于柔性电渗泵的多模态液压执行器集成皮肤状平台Yu 等人开发 MorphingSkin 皮肤状交互平台,采用柔性电渗泵作为流体执行器,实现力、形状、光学、体重域的多模态驱动,为柔性交互表面提供新方案。2025TYTianyu Yu et al.触觉可穿戴设备形变界面与软机器人材料UIST
Outline and Detail:语义驱动的分层 2D 角色生成框架Sun 等人开发 Spiritus 框架,融合文本与草图输入,通过语义匹配和开放掩码库自动分割组件生成 2D 角色图像,降低动画制作技术门槛,支持游戏开发与虚拟直播等场景。2025QSQirui Sun et al.音乐创作与声音设计工具视频制作与编辑3D 建模与动画UIST
多利益相关者智能材料应用探索的卡片式协同设计工具包:汽车内饰设计案例研究Yu 等人开发汽车内饰设计的卡片式协同工具包,通过促进多利益相关者对话,有效增强设计过程中的创造力、相互理解和实践洞察。2025TYTianyu Yu et al.形变界面与软机器人材料DIS
探索基于LLM的代理在提高老年人自我披露方面的设计Guo 等人设计Disclosure-Agent对话代理,通过20名老年人8个主题的用户研究,验证LLM代理可有效促进老年人自我披露并提升心理健康。2025YGYijie Guo et al.Tsinghua University, Academy of Arts and Design; Tsinghua University, The Future Laboratory会话代理的人格与拟人化大语言模型(LLM)的人机协作CHI
Mul-O:通过任务导向开发平台在各种场景中促进嗅觉创新Gao 等人提出 Mul-O 任务导向开发平台,整合 Web UI、API 服务器和无线嗅觉显示硬件,帮助半专业人士快速构建嗅觉应用,15 天研讨会中产出 7 个创新项目。2024PGPeizhong Gao et al.触觉可穿戴设备形变界面与软机器人材料环境感知与上下文计算UIST
Lumina:一款促进中国皮影戏设计创意的软件工具Yao 等人开发了 Lumina 皮影戏设计软件,提供轮廓模板、动画和传统纹样生成功能,有效降低设计门槛,获18名用户好评。2024ZYZhihao Yao et al.博物馆与文化遗产数字化互动叙事与沉浸式故事UIST
InkBrush:三维水墨画素描工具Yao 等人开发InkBrush插件实现3D水墨画创作,提供数字书法笔刷和编辑工具,经75名参与者测试表明其直观易用,获得水墨画和3D设计专家认可。2024ZYZhihao Yao et al.Tsinghua University3D 建模与动画可定制与个性化物件CHI
为团体音乐治疗共同设计协作数字音乐仪器Feng 等人与音乐治疗师共同设计协作数字音乐仪器 ComString,通过团体治疗课程实践验证了 CDMIs 整合社会互动与音乐表达的潜力,为团体音乐治疗提供新方向。2024YFYuan-Ling Feng et al.Tsinghua University振动反馈与皮肤刺激对话式聊天机器人音乐创作与声音设计工具CHI
Sustainflatable:采集、存储并利用环境能为气压变形界面供能Lu 等人开发了 Sustainflatable 自维持气压系统,可采集风、水流、湿度和阳光等环境能转化为压缩空气存储,实现无电子件的可编程智能供能。2023QLQiuyu Lu et al.形变界面与软机器人材料生态设计与绿色计算UIST
NaCanva:探索并赋能儿童自然灵感创作Yan 等人开发 NaCanva 系统,通过收集图像、声音、视频等多模态自然材料辅助儿童创作拼贴画,用户研究显示该系统显著提升了儿童对自然的多维观察与创造力。2023ZYZihan Yan et al.生成式AI(文本、图像、音乐、视频)数字艺术装置与交互表演饮食文化与食物交互MobileHCI
热动效应:设计和制造用于物体表面动画效果的热流体复合材料Yu等人开发Thermotion系统,利用热流体复合材料在物体表面创建热致变色动画效果,通过嵌入式流体通道动态控制温度,支持二维和三维表面2023TYTianyu Yu et al.Tsinghua University形变界面与软机器人材料形变材料与四维打印CHI
数字制作用于传承和振兴非物质文化遗产:以毛猴手工艺为例Liu 等人以毛猴工艺为例组织15组制作者工作坊,发现数字制作通过创新艺术形式为ICH注入新活力,实现从核心层面的活态传承与振兴。2023GLGuanhong Liu et al.Tsinghua University桌面3D打印与个人制造博物馆与文化遗产数字化CHI
LaserShoes:使用激光散斑成像进行低成本地面表面检测Yan等人提出LaserShoes系统,利用激光散斑成像和ResNet-18模型实现鞋装地面纹理实时检测,为活动识别和步态分析提供新途径2023ZYZihan Yan et al.MIT Media Lab全身交互与体感输入生物传感器与生理监测环境感知与上下文计算CHI
从以人为本的角度回顾和反思智能家居研究Yao等人通过对2000-2022年间19,091篇智能家居论文的关键词分析,揭示了五个以人为中心的研究趋势,为跨学科智能家居设计提供了新视角2023YYYuan Yao et al.School of Architecture and Design, Academy of Arts & Design通用设计与包容性设计智能家居交互设计CHI
面向下一代零售的设计共识建立:数据赋能的设计探索与参与式分析Yao 等人收集400名学生消费者购物行为数据并通过13位利益相关者工作坊进行参与式分析,提出数据驱动设计方法和情境知情意识模型,为下一代零售建立设计共识。2022YYYuan Yao et al.Tsinghua University交互式数据可视化参与式设计(Participatory Design)原型设计与用户测试CHI