A7.13.3Cross-modal transfer研究设计
用户会把一种交互方式的模型套用到另一种模态的产品上
别名: 跨模态迁移 · modality transfer · 模态间迁移
概念解释
跨产品迁移不只发生在同一种交互模态内部（触屏应用之间彼此借用手势和布局），也会发生在完全不同的交互模态之间——这叫跨模态迁移（cross-modal transfer）。用户会把图形界面里养成的推理规则，直接套用到语音助手、可穿戴设备或空间交互产品上，即使这些新模态在物理上根本不具备承载原有规则的方式。典型例子是对语音助手抱有"它应该记住我刚才说过的话、能理解上下文"的预期，这其实是从图形界面里"系统会保留操作历史"这条经验挪用过来的。
机制
用户的心智模型编码的往往是抽象的交互原则——"系统应当保持状态"、"操作应当可撤销"、"存在一处可以回看的历史记录"——而不是具体依附在某种模态上的按键、手势或屏幕布局。这些抽象原则本身不天然绑定在图形界面这一种呈现形式上，所以当用户进入一个自己还没有独立经验积累的新模态时，会优先用已有的抽象原则去填补对新模态的预期空白，即便新模态在物理约束上根本无法支持这些原则的实现方式——语音交互没有一块屏幕可以呈现"历史记录"这个版面，但"应该能查到之前说过什么"这条原则本身依然会被带过来。
怎么研究
- 范式：让有丰富图形界面经验、但缺乏对应新模态经验的用户首次使用新模态产品完成任务，记录其在过程中表达出的预期性话语或求助行为，把这些预期归类到对应的图形界面交互原则上，考察哪些原则被高频带入了新模态。
- 方法论注意点：新模态的用户群体本身在快速积累经验（比如语音助手用户逐年增多），跨模态迁移的强度会随大盘用户在新模态里自身经验的增长而减弱，同一范式在不同时间点测得的强度不能直接跨年份比较。
边界
- 迁移的是抽象层面的交互原则，不是模态特定的具体操作动作——图形界面里的"双击"这类具体手势不会被套用到语音交互上，会被带过去的是"系统应该支持撤销"这类原则性预期，而不是执行撤销的具体手法。
- 对已经在新模态里积累了独立、丰富使用经验的用户，原模态的推理规则会逐渐被新模态自身培养出的规则取代，跨模态套用主要集中发生在用户接触新模态的早期阶段。
怎么落地
- 设计新模态产品前，列出目标用户在其主要来源模态（多数情况下是图形界面）里已经内化的抽象交互原则清单，逐条判断新模态能否实现对应的功能；无法实现的原则要在早期交互中主动说明边界，而不是留给用户自己在受挫后才发现落空。
- 验证办法：让新用户完成一次典型任务后追问"你以为它会怎么处理"，把回答归类到具体的图形界面交互原则上，用于排查新模态产品里最容易辜负预期、也最需要提前说明的功能点。