众包能否在最少专家指导下定制教学材料？探索教师引导的众包改进 AI 辅导系统提示

DOI

当 AI 教育技术与教师的目标、偏好和教学实践相一致时，它们可能在课堂上最受欢迎。然而，教师自己很少有时间进行这种定制。众包如何帮助时间紧迫的教师？众包管道传统上专注于内容生成。然而，对于如何设计管道使众包能够成功完成修订/定制任务仍是一个开放性问题。本文探索了一个教师引导的众包管道的初始版本，旨在改进 AI 辅导系统的自适应数学提示，以符合教师偏好，同时需要最少的专家指导。在涉及 144 名数学教师和 481 名众包工作者的两个实验中，我们发现这种专家引导的修订管道可以节省专家时间，并产生比两种生成条件更好的众包修订提示（就教师满意度而言）。然而，修订后的提示并未改进 AI 辅导系统中现有的提示，尽管这些提示已经获得高度评价，但仍存在改进和定制的空间。进一步分析表明，众包工作者的主要挑战可能在于理解教师的简短书面评论并以有效编辑的形式实施它们，同时不引入新问题。我们还发现，教师更喜欢自己修订的提示而不是其他来源的提示，并且对 AI 辅导系统中的提示表现出不同的偏好。总体而言，结果表明确实存在根据教师个人偏好定制提示的明确需求，但也强调需要更详细的支架，以便众包工作者了解教师对提示的具体要求。该研究代表了文献中首次探索如何以最少的专家指导支持众包工作者修订和定制教学材料。