跳到正文

#教育测评

今日 1 条
今天10月12日周一
  1. 黑板洞察(教育行业研究)40

    中公教育与金山办公达成战略合作,共筑"AI + 职业教育"新生态

    10月9日,中公教育与金山办公签署战略合作框架协议,WPS Office、WPS 365、WPS灵犀等AI办公产品将进入中公教育教研备课、教学管理、学员学习管理与就业指导等核心环节。双方将结合金山办公AI能力与中公教育题库、课程资源打造学习、练习、模拟考试等数字化工具,并基于Comate AI等智能体能力探索答疑辅导、学习督学、备考规划等场景应用。

10月11日周日
10月9日周五
  1. arXiv · cs.CY(AI+教育/社会)71

    研究:优化教学指标反而降低 LLM 家教质量

    一项 arXiv 研究测试了用教学表现指标微调大语言模型家教的做法:在 2000 个学习者场景中审计某前沿家教,并用开源权重代理模型修正其最弱案例后,指标从 +0.05 升至 +0.42,但 31 位受训教育者的盲评分数从 4.46 降至 3.03,未修改的对照组保持不变。

    推荐理由:研究用 2000 个学习场景与 31 位教师盲评,展示教学指标优化与专家判断背离的过程,为 AI 家教评测设计提供参照。

  2. arXiv · cs.CL(语言与教育交叉)42

    System-One LLM 能否在少量或无学习者日志时完成知识追踪?

    研究测试了现成 System-One LLM 在少量或无学习者日志下的知识追踪能力:Jev 在无目标平台数据时于七个数据集上平均 AUC 达 .706,高于 28 个深度知识追踪模型用 8 名学习者训练的最佳成绩(.689),也高于 System-Two Thinking-KT(.650),API 成本约为其 1/100。

10月8日周四
  1. arXiv · cs.CY(AI+教育/社会)62

    Argus:普渡大学 CS2 课程用行为与风格指标检测 LLM 辅助编程

    普渡大学团队提出自动检测系统 Argus,通过行为与风格指标识别本科 C 语言编程作业中的 LLM 辅助痕迹,并对该校大班 CS2 课程连续六年春季学期数据进行分析,发现 2026 年春季学期 45% 的选课学生呈现与 LLM 辅助代码开发一致的模式。

    推荐理由:论文用六年数据量化编程课中 LLM 辅助代码的比例,并给出与线下考试成绩的相关性,可供课程设计参考。

  2. Google AI Blog72

    Google 在 Search 中推出五项 AI 学习工具

    Google 在 Search 的 AI Overviews 和 AI Mode 中推出五项学习工具:生成交互式可视化与模拟、按学科和 ACT/AP/GRE/SAT 等考试生成练习测验、Lens 拍照分步讲解、AI Mode 中的笔记本,以及根据上传文件生成学习文档。

    推荐理由:Google 在 Search 中一次性上线五类学习工具,教师和学生可据此判断哪些功能已开放、哪些还需等待。

  3. Inside Higher Ed22

    一位伦理学教授用 ChatGPT 与 Pangram 批改作业后的道德困境

    一位教了 15 年伦理学导论的教授在期末论文中直接出题问"该不该用 ChatGPT 解决伦理困境",结果前 10 篇论文都是整段粘贴进 Google Docs 的 AI 生成文本。他随后付费订阅 AI 检测平台 Pangram,将疑似度 60% 以上的论文判为 C 并允许重写,却收到学生激烈否认,最终因无法确知作者是谁而停用该工具。

  4. arXiv · cs.CY(AI+教育/社会)60

    研究审计 Claude Opus 4、GPT-4.1 与 Gemini 2.5 Pro 的多语言数学题文化改编

    研究分析 Claude Opus 4、GPT-4.1 和 Gemini 2.5 Pro 如何将 60 道英文数学应用题改编为孟加拉语、印地语、旁遮普语(印度)、乌尔都语、信德语(巴基斯坦)、意大利语和西西里语,并标注了 6489 处实体转换。

    推荐理由:论文用 6489 处实体标注量化了三个模型在多语言数学题改编中的文化偏差,为个性化学习内容审核提供了可复用的审计方法。

  5. arXiv · cs.CY(AI+教育/社会)27

    连接 MOOCs、智慧教学与 AI 辅助学习:一个统一的定量模型

    一项研究提出统一数学模型,整合 MOOC 课前学习、智慧教学(ST)课堂自适应与 AI 辅助课后个性化三个阶段,用同一指数学习响应函数描述教学资源如何缩小知识差距。在 100 个独立生成的班级模拟中,该模型呈现稳定的累积进步并量化各阶段增益,预算分析显示额外 AI 支持存在收益递减;固定预算下推导出的最优 AI 分配比按比例分配带来超过 14% 的学习增益提升。

  6. arXiv · cs.CY(AI+教育/社会)41

    GPT-5.4 双建议对比单建议 AI 辅助:住院医师影像判读随机多读者研究

    一项在中国三家医院开展的随机三臂多读者研究显示,132 名临床经验不足 3 年的住院医师在 AI 辅助下判读 60 张影像,放射科住院医师采用 GPT-5.4 加 Kimi-K2.6 或 Gemini-3.6 Flash 的双建议支持,准确率提升比单用 GPT-5.4 高 6.69 和 7.87 个百分点(Holm 校正 P=0.030),非放射科住院医师则无显著差异。

  7. arXiv · cs.CY(AI+教育/社会)62

    研究:LLM结构化评分与反馈的诊断质量存在三类系统性偏差

    一项基于JorGPT数据集的研究考察了LLM生成的结构化评分与反馈是否名副其实,该数据集包含50道计算机科学开放题的3041份学生作答,由人类教师和三个商业LLM分别评分。

    推荐理由:基于3041份学生作答的实证数据,揭示LLM评分与反馈在诊断质量上的三类系统性偏差,为教师判断哪些环节仍需人工把关提供依据。

  8. arXiv · cs.CL(语言与教育交叉)22

    RUSPAN:将评分标准跨度作为标签表征的短答案评分框架

    RUSPAN 是一个以评分标准为条件的自动短答案评分(ASAS)框架,将题目、学生答案与所有候选评分等级序列化为单一序列,在一次 LM 前向中按列表方式打分。其 RUSPAN-RIM 变体用评分标准独立掩码阻止各评分标准跨度互相注意,防止训练时过拟合评分标准模式,以支持零样本迁移。

10月7日周三
  1. 芥末堆(教育科技)80

    甘肃印发“人工智能+教育”行动计划,2027年秋季学期起AI通识教育覆盖中小学

    甘肃省教育厅等五部门印发《甘肃省“人工智能+教育”行动计划(2026—2030年)》,提出从2027年秋季学期起,小学中高年级及初高中每学年人工智能相关课时不低于8课时,实现通识教育覆盖全省中小学。

    推荐理由:甘肃五部门行动计划给出了课时、基地校、算力等量化目标,可观察省级 AI 通识教育落地路径。

  2. arXiv · cs.CY(AI+教育/社会)42

    基于 AI 的数学学习中求助策略的变化可预测无 AI 辅助下的表现

    一项针对 112 名九年级学生的研究发现,学生使用通用 GenAI 进行数学建模练习时,其求助内容在会话内逐渐转向理解导向(概念与程序性帮助,而非寻求答案或验证)的轨迹,能预测后续无 AI 辅助下的表现;而 AI 使用行为的静态汇总在预测试成绩之外无法解释额外方差。研究共采集 880 条实质性学生发言,其中 95 人完成前后测,89 人可计算求助轨迹。

  3. arXiv · cs.CY(AI+教育/社会)62

    纽约高中择校匹配研究:拥堵感知推荐可减少入学差距

    研究以纽约高中择校匹配为背景,提出推荐引发的拥堵现象:若推荐把过多申请者导向同一项目,原本匹配概率高的申请者也会因竞争加剧而落空,受影响最大的是附近可选项目最少的申请者。

    推荐理由:纽约高中择校匹配的随机对照试验显示,拥堵感知的推荐算法能提升推荐项目入读率且无人被拒。

  4. arXiv · cs.CL(语言与教育交叉)26

    语言承载专家印象:工具锚定的 LLM 评委实现咨询质量评估跨域迁移并超越域内训练

    在三个德语模拟咨询语料(含两个全科医疗、一个学校家长-教师场景,共 n=195 段专家评分会话)上,跨域训练优于域内训练:留一域迁移的嵌套 Spearman ρ 达 0.54,而目标域内训练不超过 0.48,配对会话级差距为 +0.15,训练集规模匹配后仍保持 +0.12。

  5. arXiv · cs.CL(语言与教育交叉)22

    通过击键检测 LLM 辅助的越南语写作:行为操纵下的鲁棒性研究

    研究构建了越南语击键数据集,涵盖真实写作、转录和改写三种写作模式,并定义用户刻意改变打字模式的行为威胁模型。在用户无关和上下文无关设置下评测时序与节奏特征、1D-CNN 和 TypeNet 四类击键建模方法,结果显示序列模型多数情况下优于特征方法,转录可被可靠识别,但改写和对抗操纵样本常被误判为真实写作。引入行为操纵数据的对抗训练后,可分性与鲁棒性显著提升。

  6. arXiv · cs.CL(语言与教育交叉)31

    儿童手语翻译安全审计:面向儿童 AI 的 Sign-to-Text 安全接口评估

    自动手语翻译(SLT)已进入消费产品,但尚无公开系统将 SLT 与儿童 AI 安全工具联合评估,主流已部署 SLT 模型也未在 18 岁以下手语者上训练或正式评测。该论文提出一套由聋人群体参与设计的部署前审计方案,包含失败分类法、脱敏场景 schema、四种比较条件和四项结果指标,计划以 Auslan 为首个案例研究。

10月6日周二
  1. The 7422

    观点:慈善事业曾建学校,如今可建数学学习新方式

    面对AI让个性化教学日益普及、Khan Academy等免费数学课程覆盖从数数到微积分,有观点提出当代慈善家应出资建立一套严格的独立数学掌握度测评体系。该测评类似Advanced Placement考试但对应各年级年末州测评,可随时参加、严谨安全、经独立验证并免费开放,用以认证学生已掌握的内容而不问学习途径。2016年一项综合近百年研究的综述发现,学业加速对学生成绩有正向影响。

  2. EdSurge71

    EdReports 研究:教育科技厂商在未证实效果前仓促集成 AI

    EdReports 对 10 家 K-12 课程与教育科技厂商的审查发现,只有 1 家提供了第三方证据证明其内置 AI 功能改善了教学效果。研究指出,现有框架多关注隐私与安全,缺少判断 AI 能否提升学习或保持课程一致性的统一方式,而厂商在未通知学校的情况下推送 AI 更新,使学校难以确认产品有效性。报告建议采购方追问认证与证据的具体含义,并参考 SIIA 的七项 AI 教育原则。

10月5日周一
  1. The Hechinger Report71

    研究:Khanmigo 数学 AI 家教未带来额外学习增益,学生因不愿被反问而弃用

    多伦多大学研究人员在田纳西州 18 所中学追踪学生两年(2024 至 2026 年),测试 Khanmigo 能否提升至少落后一个年级的低成就学生。结果显示,使用 Khan Academy 干预的学生数学表现优于常规补习班,但提升幅度有限,且不高于此前无 AI 助手时 Khan Academy 练习的效果,Khanmigo 并未带来额外增益。

  2. arXiv · cs.CY(AI+教育/社会)74

    StudentBench:AI 辅导与人类辅导在 GRE 学习增益上等效

    研究团队发布 StudentBench,一套 AI 教学评估工具与公开平台,已收集超过 175,000 条学生与 AI 的对话消息,用于检验大语言模型能否带来与人类辅导等效的学习增益。

    推荐理由:研究用 2383 名参与者的 GRE 学习增益数据,比较 AI 辅导与人类辅导的等效性及成本差异。

  3. arXiv · cs.CY(AI+教育/社会)30

    数据标注作为教学提示:从主观标签到批判性思维

    一项在荷兰 Fontys 与丹麦 IT University Copenhagen 开展的标注活动让 43 名学生按 3 分制标注皮肤病变图像的毛发覆盖度,调查显示学生对标注歧义、数据质量、偏见与公平等概念的熟悉度大幅提升,多数人认可个人解读会影响标注,并认为该活动比传统讲授更能理解偏见。

  4. arXiv · cs.CY(AI+教育/社会)40

    相同成绩,不同过程:AI 介入教育中的认知所有权

    一项针对 150 组学生与 AI 对话样本的分析发现,相似的作业成绩可能对应截然不同的认知参与模式。研究以“认知所有权”为框架,考察 Direction、Integration、Evaluation 三个维度,指出作业分数只能反映评估结果,无法还原学生与 AI 之间认知工作的分配方式。研究据此提出,测评应纳入认知过程的证据,而非仅依赖最终产出的质量。

  5. arXiv · cs.CY(AI+教育/社会)22

    ReLEAF:连接数据保管方与研究者的教育真实世界数据可信共享社会技术框架

    针对教育真实世界数据(ERWD)共享受伦理、监管与治理限制的问题,研究者提出社会技术框架 ReLEAF,通过两阶段数据共享连接数据保管方与研究者:先共享差分隐私合成数据用于探索性分析,再按需进行受控真实数据验证。该框架经三轮设计科学研究迭代打磨,参与者分别为 4 名研究生、6 名研究者和 90 名本科生,并提炼出三条设计原则,为可信 ERWD 共享提供具体框架。

  6. arXiv · cs.CL(语言与教育交叉)22

    超越分数对齐评估 LLM-as-a-Judge:评判残余难度的心理测量学分析

    研究从心理测量学视角分析 LLM-as-a-Judge,用多面Rasch模型将人类与 LLM 评分分解为摘要质量、评分者严厉度等成分,提出"残余难度"指标。在 SummEval 上测试 17 个开放权重 LLM 评判者发现,潜在摘要质量的中等对齐并不意味着残余难度对齐,且这种错配强烈依赖评分维度:一致性维度呈 LLM 更难趋势,连贯性维度则人类更难。

10月4日周日