跳到正文
arXiv cs.AI· Jiawei Xiong, Cheng Tang, Hong Jiao, Hanna Choi·· 4 小时前AI 评分53

arXiv 论文:利用证据中心设计指导测量中的提示词工程:以自动评分为例

Using Evidence-Centered Design to Guide Prompt Engineering in Measurement: An Illustration with Automated Essay Scoring

AI 导读

该研究提出将证据中心设计(ECD)框架应用于教育场景的提示词工程,以解决当前提示词构建缺乏结构导致的效度威胁。作者将 ECD 的学生模型、证据模型和任务模型映射到教育提示词设计组件,并推导了五项设计原则。实证研究表明,在自动评分任务中,基于 ECD 设计的提示词相比最先进(SOTA)基线能增强 AI 生成输出的有效性、可靠性和公平性。

来源:arXiv cs.AI · arxiv.org