D5.05.1Sensory substitution设计研究
一种感觉的信息可编码到另一种通道
别名: sensory substitution · cross-sensory encoding · translation
概念解释
一种感觉的信息可以被编码到另一种通道。视觉图像可以转为触觉点阵或声音模式,声音的方向可以转为振动位置。替代改变了信息的载体,但没有改变信息本身,因此使用者可以通过另一条通道获得原本无法获取的内容。
机制
替代的可行性来自大脑对信息的抽象能力:只要编码保留了足够的区分特征,接收通道就能承载原本由另一通道传出的信息。关键在于编码的映射方式——直接的维度对应(亮度对振动强度)易于理解但容量有限,而抽象的编码(把图像转为音符序列)容量更高但需要学习。替代的有效性取决于编码是否稳定、是否可扩展,以及是否保留了使用者完成任务所需的关键特征,而不是还原原通道的完整体验。
怎么研究
可让使用者完成依赖原通道的任务并测量表现:例如让使用触觉替代的视障用户完成空间定位或阅读任务,记录正确率、完成时间与学习曲线。变量包括编码方案、训练时长与任务类型。因变量包括任务正确率与达到稳定的训练量,后者决定方案在实际推广中的可行性。
边界
替代通常不能还原原通道的全部能力,尤其是精细的空间分辨或音色辨识。若任务只依赖少量类别,替代效果较好;若任务依赖高分辨率的细节,替代的实用价值受限。使用者需要持续训练才能达到稳定表现,短期试用不能反映真实能力。
怎么落地
- 明确替代需要支持的具体任务,据此选择编码方案。
- 保留任务所需的关键区分特征,而不是追求还原原通道的完整体验。
- 为使用者提供系统的训练流程,并评估达到稳定表现所需的训练量。
- 验证方式:让使用者用替代通道完成目标任务,测量正确率与学习曲线,确认训练量在实际推广中可接受。