ProgramAlly：通过多模态端用户编程创建自定义视觉访问程序

视频

DOI

现有视觉辅助技术仅针对简单常见场景设计，盲人用户难以自定义其功能。本研究借鉴DIY辅助技术的相关工作，探究端用户编程作为盲人创建和定制视觉访问程序以满足独特需求的途径。我们提出ProgramAlly系统，利用三种端用户编程方法（块编程、自然语言、示例编程）创建视觉信息过滤程序，如「在公交车上找数字」。该系统基于盲人遇到的场景设计视觉过滤任务表示，并集成了设备和云模型来生成和运行这些程序。对12名盲人成年人的用户研究表明，参与者根据任务不同偏好不同的编程方式，并设想使用视觉访问程序解决现有应用难以处理的无障碍挑战。