跳到主要内容
AI News HubLIVE
站内改写1 分钟阅读

LaTA:一种即插即用、符合FERPA标准的本地LLM自动评分器,用于高年级STEM课程

文章摘要

LaTA是一种开源的自动评分器,完全在本地硬件上运行,使用LaTeX原生工作流程,通过四阶段流水线(摄取、分段、评分、报告)和本地托管的开源权重链式思维LLM评分器(gpt-oss:120b)对学生的作业进行评分。在俄勒冈州立大学ME 373课程中部署,约200名学生,每份作业边际成本为零,评分错误率约0.02-0.04%,使用LaTA的班级在期中考试和期末考试中分别比传统评分班级高出约11%和8%,学生的自信心也有显著提升。

来源arXiv AI作者: Jesse A. Rodr\'iguez
LaTA:一种即插即用、符合FERPA标准的本地LLM自动评分器,用于高年级STEM课程
报告错误

纠错通道尚未开通,可先复制下方文章信息留存。

查看更正说明
直接读正文

LaTA(LaTeX Teaching Assistant)是一种开源的自动评分系统,专为高年级STEM课程设计。它的核心优势在于完全运行在本地硬件上,不依赖任何第三方API,从而确保学生数据不会泄露,严格遵守FERPA(家庭教育权利和隐私法案)法规。LaTA采用LaTeX原生工作流程,这对于许多工程和物理课程来说已经是标准做法,因此教师和学生无需改变现有的提交习惯。LaTA的处理流程分为四个阶段:摄取、分段、评分和报告。它使用一个本地托管的开源权重链式思维LLM(gpt-oss:120b)来将学生的作业与教师编写的参考答案进行对比,并应用一个YAML格式的评分标准进行逐项二元评分。在2026年冬季学期,LaTA在俄勒冈州立大学的ME 373(机械工程方法)课程中进行了实际部署,大约有200名学生参与。整个评分工作仅由一台Mac Studio完成,每份作业的边际成本为零,每次提交的实际处理时间为1至3分钟。这使得教师能够轻松地对更正后的作业进行重新评分,并且极大地扩展了助教的办公时间。经过教师验证,整个学期中每项评分标准的错误率大约在0.02%到0.04%之间。与同一教师此前采用传统评分方法的班级相比,使用LaTA的班级在期中考试中平均成绩高出约11%,在期末考试中高出约8%。此外,学生们在159份调查问卷中报告了在所有学习目标上的自信心显著提升,每个目标的Likert评分平均增加至少1.49分,所有比较的p值均小于10^{-27}。LaTA的代码已在AGPLv3许可证下发布。

展开要点与分析

文章情报

工程师中级

要点

  • LaTA是一款开源的自动评分器,完全在本地硬件上运行,不将学生数据发送到第三方API,符合FERPA标准。
  • 采用四阶段流水线(摄取、分段、评分、报告),使用本地托管的链式思维LLM(gpt-oss:120b)进行评分。
  • 在俄勒冈州立大学ME 373课程中成功部署,约200名学生,评分错误率极低(0.02-0.04%),学成绩和自信心均有显著提高。

要点与分析由自动化流程生成,可能有误,请结合原始来源核实。