跳到正文
热点事件持续更新

Claude Code 高校手写考试评分可靠性研究

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

沙特阿拉伯某高校研究者 Rayed AlGhamdi 发表研究,评估基于 Claude Opus 4.6 的 Claude Code 在计算机图形学课程中评分 60 份手写期中试卷的可靠性。结果显示,AI 评分与人类专家总分高度一致(r = 0.97,MAE = 0.85),重测信度极佳(ICC = 0.96),但存在轻微正向偏差。 该研究指出,AI 在绘图题及修正后的选择题上出现关键词匹配不足和注意力漂移等失效模式。由于作者作为唯一学科专家提供人类基准,该设计评估的是与领域专家参考的一致性,而非评分者间信度。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. arXiv cs.AI精选
    Claude Code 作为高校手写考试智能体评分系统的可靠性研究

    该研究评估了基于 Claude Opus 4.6 的 Claude Code 在沙特阿拉伯某高校计算机图形学课程中评分 60 份手写期中试卷的可靠性。结果显示 AI 评分与人类专家总分高度一致(r = 0.97,MAE = 0.85),重测信度极佳(ICC = 0.96),但存在轻微正向偏差,且在绘图题及修正后的选择题上出现关键词匹配不足和注意力漂移等失效模式。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。