MAIDR:使用多模态数据表示使统计可视化可访问
视觉障碍者技术(屏幕阅读器、触觉图形、盲文)交互式数据可视化辅助技术专家HCI 研究员
文献标题
MAIDR: Making Statistical Visualizations Accessible with Multimodal Data Representation
文献信息
- 主题领域: 数据可视化、无障碍技术、人机交互
- 关键词: 无障碍性, 统计可视化, 盲人, 多模态, 可刷新的盲文显示器, 屏幕阅读器
研究背景与问题
-
发现的问题或挑战:
- 数据可视化通常默认为视觉呈现,这阻碍盲人用户理解统计信息。
- 许多数据可视化工具对屏幕阅读器用户来说缺乏无障碍支持。
- 当前的多模态交互技术(例如文本描述与声化)不能充分满足盲人用户的需求,尤其是在处理复杂的统计图表时。
- 多模态可视化的研究大多局限于简单图表(如柱状图和折线图),缺乏对复杂图形的支持。
-
重要性:
- 数据可视化在金融、医疗、教育和其他领域的重要性日益增加,确保所有人都能访问这些信息是公平和包容的基础。
- 提供有效的无障碍数据访问不仅支持盲人用户,也是推动技术领域无障碍性发展的重要方向。
-
研究动机和相关工作:
- 现有研究已经开发了一些策略,例如通过声化和文本描述提供非视觉数据访问,但这些方案在人机交互、精确性和用户自主性方面不足。
- 文献呼吁改善涉及触觉技术(如可刷新的盲文显示器)的无障碍数据表示方式,以及为用户提供多模态自主切换功能。
解决方案
-
提出的方法或解决方案:
- MAIDR(Multimodal Access and Interactive Data Representation)系统结合了四种模式(盲文、文本、声化和审查模式),用于帮助盲人用户以多模态方式访问数据可视化。
- 使用可刷新的盲文显示器动态呈现图形信息,是一项全新的尝试。
- 通过用户定制功能允许在多模态间切换,同时保证各模式间光标位置同步。
-
创新之处:
- 集成了盲文显示作为一种非语言触觉表示方式,使数据访问不仅限于传统的文本或声化。
- 提供用户自主选择的多模态组合,能够根据用户偏好调整盲文显示大小、声化频率等属性。
- 支持层级导航,允许用户以逐层方式访问叠加图表的不同元素,例如散点图中的预测线和数据点。
-
实施步骤与关键技术:
- 用户生成统计图像及其元数据(JSON格式),通过 MAIDR 系统转化为网页可交互可视化图表。
- 设计了四种交互模式:盲文(Braille)、文本(Text)、声化(Sonification)、审查(Review),使用户能够根据需求切换模式。
- 为单行可刷新的盲文显示器开发编码算法,将视觉图形转换为触觉模式。
- 声化时采用平移与音高匹配方式表达数据点,辅以文本说明完善数据点的信息。
研究成果
-
具体成果:
- 基于 MAIDR 系统的用户研究表明,不论是柱状图、热图、箱形图,还是散点图,系统均能精确支持数据理解。
- 在用户测试中,参与者能够准确解答涉及数据查找、比较、形状描述及非视觉信息的问题。
- MAIDR 系统收到的可用性评分高于平均水平,其中柱状图(81.36分)和热图(75.5分)评分最高,用户反馈体现了系统功能的实用性。
-
与现有解决方案相比的优势:
- MAIDR 系统的盲文模式补充了目前多模态图表中的空缺,允许触觉图表实时动态更新。
- 用户能够通过多个感官结合的方式(非语言触觉、听觉与语言描述)获得数据理解。
- 系统允许用户根据需求灵活定制交互体验,增强了无障碍技术的用户自主性。
-
实验与评估结果:
- 系统进行了用户研究,参与者展现了不同的使用策略,例如 "整体到部分" 和 "部分到整体" 的数据探索方式。
- 某些用户更偏向于声化(高度音乐辨识能力),而另一些用户认为盲文更直观帮助量化数据结构。
- 使用状态图分析了用户如何结合模式处理复杂数据可视化。
-
局限性与未来方向:
- 单行盲文显示器的局限性导致某些复杂图表(如热图)难以呈现全局数据分布。
- 为支持更多用户需求,可探索开发多行盲文显示器,增强数据表示的层次感。
- 增加对用户数据操作的支持,例如数据过滤和整理,扩展至更广泛的编程环境。
总结
MAIDR 系统通过创新的多模态交互设计和技术实现,为盲人用户提供了一种全新的统计可视化访问方式,同时彰显了无障碍数据技术的潜力与重要性。未来的研究将集中于技术的扩展与优化,以进一步推广无障碍数据工具的应用。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 如何设计一套多模态交互系统,帮助盲人用户理解复杂的统计数据可视化?分类: 图表图像与视觉内容可访问性同类问题arrow_forward
- 刷新式盲文显示器和非视觉化技术(如声音化和文本描述)如何结合以提高盲人对统计图表的理解效率?分类: 图表图像与视觉内容可访问性同类问题arrow_forward
- 盲人用户在使用多模态统计可视化工具时,偏好和习惯有哪些不同?分类: 图表图像与视觉内容可访问性同类问题arrow_forward
lightbulb
现实痛点
1- 盲人用户无法轻松理解复杂的统计图表信息。分类: 图表图像与视觉内容可访问性同类问题arrow_forward
- 100%
Chart Reader:为屏幕阅读器用户设计的可访问可视化体验
CHI '23· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文) +1
- 75%
Twitter A11y:一个使Twitter图片可访问的浏览器扩展
CHI '20· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文)
- 75%
“定制是关键”:可重构的文本标记用于可访问的数据可视化
CHI '24· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文) +1
- 67%
环境:多模态数据表示的可访问结构化编辑
CHI '24· 抬头显示(HUD)与驾驶辅助系统(ADAS) +2
- 60%
为屏幕阅读器用户丰富视觉内容的表示
CHI '18· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文) +1
- 60%
用舌头阅读:个体差异影响BrainPort对模糊刺激的感知
CHI '20· 振动反馈与皮肤刺激 +1
- 60%
介绍游戏信息控制框架:为视觉障碍人士提供数字游戏访问
CHI '20· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文) +1
- 60%
与AI进行社交意义构建:为盲童设计一个开放式的AI体验
CHI '21· 生成式AI(文本、图像、音乐、视频) +1
- 60%
改进颜色图案以帮助色觉缺陷人士
CHI '22· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文) +1
- 60%
Co11ab:增强视障人士同步协作写作的可访问性
CHI '22· 视觉障碍者技术(屏幕阅读器、触觉图形、盲文) +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3613904.3642730
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2024
emoji_events
奖项
未标记奖项
group
作者
5 位作者
sell
研究子方向
视觉障碍者技术(屏幕阅读器、触觉图形、盲文)、交互式数据可视化
work
职业/产业
辅助技术专家、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文