赋能儿童创建人工智能驱动的增强现实体验

DOI

尽管人工智能驱动的增强现实技术有潜力提升儿童的学习体验，但目前其使用方式主要将儿童定位为消费者而非创造者。我们介绍了Capybara，一个基于AR的人工智能可视化编程环境，旨在赋能儿童创建、定制和编程叠加于物理世界的3D角色。Capybara使儿童能够使用文本到3D生成式人工智能模型创建虚拟角色和配饰，并通过自动绑定和身体追踪来为这些角色制作动画。此外，我们的系统采用基于视觉的人工智能模型来识别物理物体，使儿童能够编程虚拟角色与其物理环境之间的交互行为。我们通过一组新颖的AR体验展示了Capybara的表现力。我们在美国和阿根廷对20名儿童进行了用户研究。研究结果表明，Capybara可以赋能儿童利用人工智能创作个性化和引人入胜的AR体验，无缝衔接虚拟与物理世界。