arXiv · cs.CY（AI+教育/社会）· Xi Zhao, Xinyue Jiao, Zhen Xu·· 4 天前精选AI 评分62
研究：LLM结构化评分与反馈的诊断质量存在三类系统性偏差
Beyond Score Accuracy: Examining the Diagnostic Quality of LLM-Generated Structured Assessment in Higher Education
AI 导读
一项基于JorGPT数据集的研究考察了LLM生成的结构化评分与反馈是否名副其实，该数据集包含50道计算机科学开放题的3041份学生作答，由人类教师和三个商业LLM分别评分。
推荐理由
基于3041份学生作答的实证数据，揭示LLM评分与反馈在诊断质量上的三类系统性偏差，为教师判断哪些环节仍需人工把关提供依据。
来源：arXiv · cs.CY（AI+教育/社会） · arxiv.org