为听障人士定制的AI化身生成手势与声音：面向听障-听力交流的混合现实设计

本研究探讨了针对混合听力与手语能力学习者的创新交互设计，利用Apple Vision Pro混合现实技术和生成式AI动画化身。采用参与式设计方法，研究团队让15名听障/重听学生构思具有手语-英语互译能力的AI化身，以促进与听力同伴的面对面交流。参与者希望AI化身能解决人类译员资源匮乏和高昂费用问题。研究发现用户对AI化身与真实人物结合有多种偏好，强调对AI生成手势、声音、面部表情及同步性的定制控制权对增强情感表达至关重要。基于研究发现，研究团队提出了一套平衡手语规范与听力社会规范的设计建议，为提升生成式AI在特定社会规范场景中的真实性提供见解。