danceON:文化响应式创意计算
荣誉提名作者
文献标题
danceON: Culturally Responsive Creative Computing
文献信息
- 主题领域: 跨学科学习、程序设计教育与创意计算
- 关键词: 计算教育, 数据素养, 舞蹈, 文化响应性教育法, 基于设计的研究
研究背景与问题
-
问题与挑战:
- 计算机科学与数据素养教育领域中存在显著的包容性不足问题,尤其是面向女性与少数民族的教育。
- 学生的个性化和文化特征在传统课堂教学中没有得到有效体现。
- 创意计算教育尚未充分探索融合身体学习、文化主题和数据相关性的学习方式。
-
研究重要性: 研究如何通过文化相关的教育方法,结合学生熟悉和珍视的背景和问题,帮助学生将计算机和数据科学视为具有个人意义和实际价值的学习内容。
-
研究动机与相关工作:
- 灵感来自舞蹈与编程的结合,为学习者提供赋权和表达自我的平台。
- 结合现有的研究基础,包括文化相关教育法、具身学习和领域特定编程语言,为学生提供数据科学与编程的创造性前沿工具。
解决方案
-
提出的解决方案: 作者开发了一个名为 "danceON" 的系统,支持学习者利用自己的身体运动,在数据科学、计算和舞蹈的交集上进行创作。其核心包括:
- 一个声明式语法和响应性特征的领域特定编程语言(DSL)。
- 支持视频与实时交互的姿势检测与分类的媒体播放器。
- 一个基于网页的实时集成开发环境(IDE)。
-
创新之处:
- 系统通过声明式语言降低编程语言复杂性,适合编程初学者。
- 将现实世界的身体数据与创意可视化相结合,有助于学习者直观理解、学习和操作自己的身体数据。
- 提供文化响应性学习的支持,使学生能表达文化身份、社会问题或艺术创意。
-
实施步骤与技术:
- 通过语法简单的 DSL 语言,将虚拟图形绑定到实际的身体移动。
- 使用开源姿态检测工具(如 PoseNet 和 OpenPose)处理身体位置和运动数据。
- 实现实时代码反馈的开发环境(具备语法高亮、实时错误检查和代码补全)。
研究成果
-
实验与分析: 作者在与 STEM From Dance (SFD) 的合作中部署了 danceON 系统。两次远程夏令营活动中包括 21 名参与者(均为少数族裔高中的女性),成果分析主要集中在系统的表达能力和参与者的艺术创作。
-
取得的关键成果:
- 文化响应性: 系统被有效应用于社会主题、个性化表达(如 "Black Lives Matter")以及美学驱动的创作实践。
- 降低入门障碍: 学习者能够迅速编写代码生成动画,并进行跨学科尝试。
- 创意编码: 系统支持从艺术中获取编程灵感,也启发学生利用代码推动艺术创作。
-
优势: 与传统计算教学相比,danceON 显示出更强的文化相关性,并且对初学者更友好。作者观察到学生更愿意探索、展示和编码自己的创意。
-
实验或评估结果: 学生完成了多个多样性显著的舞蹈项目,例如使用代码表示歌词含义、增强舞蹈表现力或者编排内容相关的动画。代码的表现与身体动作或音乐实时集成。
-
局限性与未来方向:
- 当前系统仍需要教师和项目设计者的大量支持,如代码示例和调试。
- 摄像头姿势识别中的数据错误(例如肢体遮挡)可能成为学习体验中的挑战。
- 未来应在 IDE、错误报告和学习进程字段进一步优化,增加支持学习者处理和理解“混乱数据”的功能。
- 探索如何通过扩大时间安排或缩小项目范围,支持学生更深入开展舞蹈与数据驱动系统的复杂性交互。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
研究问题
3- 如何通过结合文化相关的教育方法和学生的背景,让学生对计算机和数据科学产生个人意义和实际价值?分类: 编程、计算与物理原型教育同类问题arrow_forward
- 能否将舞蹈与编程相结合,帮助学生直观理解和操作自身的身体数据?分类: 编程、计算与物理原型教育同类问题arrow_forward
- 舞蹈驱动的创意计算系统能否降低编程的入门门槛并支持个性化创作?分类: 编程、计算与物理原型教育同类问题arrow_forward
现实痛点
1- 少数群体学生难以找到与自身文化相关且具有创意的编程学习方式。分类: 编程、计算与物理原型教育同类问题arrow_forward
- 75%
理解舞蹈中的动觉创造力
CHI '19· 全身交互与体感输入 +1
- 75%
板子反击:通过躯体设计反思武术实践
CHI '23· 全身交互与体感输入 +1
- 75%
提升在线运动视频的教育潜力:基于TikTok舞蹈挑战的系统开发与实证研究
CHI '25· 舞蹈与身体动作计算
- 75%
调谐无形性:特雷门琴学习三年反思
DIS '24· 全身交互与体感输入 +1
- 75%
拓展计算机视觉交互系统在团队舞蹈练习中的设计空间
DIS '24· 全身交互与体感输入 +1
- 60%
舞蹈过渡:哪些形式的技术最能支持专业舞者学习新的动作风格?
CHI '22· 全身交互与体感输入 +2
- 60%
增强现实中舞蹈空间性感知支持
C&C '23· AR 导航与情境感知 +1
- 60%
可观察的创意意义建构(OCSM):量化即兴协作共创交互的方法
C&C '23· 全身交互与体感输入 +1
- 60%
CameraReady:评估显示类型和可视化对姿势指导的影响
DIS '21· 人体姿态与行为识别 +1
- 60%
基于运动的设计方法中的设计资源:基于实践的表征
DIS '23· 全身交互与体感输入 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)