技术进展

课程对齐度测量:CS2013与CS2023十年对比

Heooo 06月19日12时03分 2 阅读

「研究提出人机协同框架,测量计算机科学课程与CS2013及CS2023指南的对齐度,发现覆盖度十年稳定约50%,但认知深度因新标准提升而下降。」

国际计算机科学课程指南约每十年修订一次,但高校缺乏可靠、可重复的方法来评估自身课程与最新指南的覆盖程度,以及指南更新后覆盖度的变化。一项来自arXiv的最新研究(论文编号2606.19469)提出了一种人机协同的流水线框架,旨在系统性地解决这一问题。该框架被纵向应用于一所认证计算机科学学士学位项目,分别对照2013年版(CS2013)和2023年版(CS2023)的课程指南进行对齐度测量。

研究团队将课程大纲和每版指南分别构建为结构化语料库,通过语义检索生成候选的课程与知识单元匹配对,再由人工评审在明确的覆盖定义下确认匹配。在七种基准检索器中,基于倒数排名融合的集成方法表现最佳,而一个知名的长上下文模型表现反而不如一个小型句子模型,这表明检索器的选择需要经过实证验证。最终生成的课程-指南映射图由独立的第二评审员进行验证,CS2023的Cohen's kappa系数为0.64,CS2013为0.69,达到中等以上一致性。

测量结果显示,该课程项目覆盖了CS2023中49.7%的知识单元,以及CS2013中50.9%的知识单元,十年间覆盖度几乎保持不变。这一发现表明,尽管指南内容本身发生了结构性调整,但该项目的知识覆盖范围并未出现显著扩展或收缩。研究进一步将相同的检索-确认设计扩展到能力表述和认知深度的分析。结果发现,对于每个指南下覆盖的知识单元,该课程约88%的单元都明确表述了相应的能力要求;然而,在认知深度方面,CS2023指南下仅有76%的覆盖单元达到了推荐深度,而CS2013指南下这一比例为95%。研究指出,这一差距主要反映了新指南提升了期望深度,而非课程本身出现了退化。

通过纵向对比,研究成功区分了两类缺口:一类是持续存在的结构性缺口,例如并行与分布式计算、编程语言基础、系统基础等知识领域,这些领域在CS2013和CS2023两版指南以及ABET认证标准中均未被充分覆盖;另一类则是因指南标准演变而产生的差异,例如某些领域在旧版中可能已被覆盖,但新版提高了要求。这种区分对于课程修订具有直接指导意义:前者需要课程体系的结构性调整,后者则可能只需在现有课程中加深教学深度。

该研究提供的框架具有可复用性,研究团队表示可应请求提供相关工具和数据。这一成果为计算机科学教育评估提供了量化工具,有助于高校在指南更新时系统性地诊断课程短板,并制定有针对性的改进方案。随着AI和计算教育领域的快速发展,这种基于数据的课程对齐度测量方法有望成为课程设计与认证的重要辅助手段。

# 课程对齐 # CS2013 # CS2023 # 语义检索 # 教育评估

来源:Heooo AI工具导航