01 / BACKGROUND
题目背景
一门课上百份简答题按参考答案逐句找得分点,两位教师前后批次标准漂移,学生申诉时拿不出可复核的给分依据。
放在人工智能专业的毕业设计里,这个题目属于“自然语言处理”方向。把参考答案拆成评分点,按学生答案的语义命中与覆盖情况给建议分,重点是与教师评分的一致性,用分档误差和加权 Kappa 说话。
它的价值不在于功能数量,而在于能否把一个问题定义清楚:需要什么数据或条件、用什么方法处理、结果怎样验证。开题前先把这三件事写成一句话。
02 / DELIVERABLES
要做出的成果
最终应交付:可运行评分系统、评分点标注集、源码与部署文档、一致性分析报告、论文。其中可演示、可复核的部分建议按下面四项准备:
- 答卷导入与匿名:说明其输入、处理与输出。
- 评分点拆解:保留关键过程的数据或记录。
- 分句与清洗:覆盖正常情况与边界条件。
- 句向量编码:整理可复核的结果与说明。
- 评分点匹配:说明其输入、处理与输出。
- 规则兜底:保留关键过程的数据或记录。
- 分数汇总:覆盖正常情况与边界条件。
- 一致性统计:整理可复核的结果与说明。
- 复核界面:说明其输入、处理与输出。
- 报告导出:保留关键过程的数据或记录。
答辩前至少准备一套离线可用的演示材料,避免现场网络、设备或账号问题影响展示。
03 / ROUTE
技术路线与模块
技术栈以 Python、Transformers、sentence-transformers、scikit-learn、Flask、MySQL 为主。建议按“条件确认 → 方案设计 → 模块实现 → 测试整理”四步推进:
-
STEP 01
条件与范围
核对数据、设备、软件与时间,确认“一门课上百份简答题按参考答案逐句找得分点,两位教师前后批次标准漂移,学生申诉时拿不出可复核的给分依据”这一场景中哪些部分能在现有条件下完成。
-
STEP 02
方案与模块
按 答卷导入与匿名、评分点拆解、分句与清洗、句向量编码、评分点匹配、规则兜底、分数汇总、一致性统计、复核界面、报告导出 划分模块,画一张输入、处理、输出的流程图,并标出模块之间的接口。
-
STEP 03
实现与联调
先做最小可运行版本,再逐模块补全。每完成一个模块,留一组可复现的测试数据或截图。
-
STEP 04
测试与整理
围绕准确率、响应时间、误差范围或案例结论设计测试,形成结果表,再写论文中的实验与分析章节。
04 / REVIEW
考核要点
- 模块完整:答卷导入与匿名、评分点拆解、分句与清洗、句向量编码、评分点匹配、规则兜底、分数汇总、一致性统计、复核界面、报告导出 都有对应实现或分析,不能只做界面或只写文档。
- 指标可复核:数据来源、参数设置与测试环境记录完整,他人能按说明复现。
- 创新点可说明:不报总体准确率,把误差拆成多给分、少给分与档位错三类并按评分点归因,能指出哪类评分点最难判、为什么难判。 要能对应到具体设计或实验差异,而不是一句口号。
- 口径一致:论文、图表、演示与答辩陈述使用同一组数据和结论。
05 / FAQ
常见问题
Q.01做《简答题自动评分与教师评分一致性分析》需要什么基础?
主要会用到 Python、Transformers、sentence-transformers、scikit-learn、Flask、MySQL。建议先完成相关课程实验,至少能独立搭起运行环境、读懂一个同类项目的代码或方案,再开始做自己的模块。
Q.02数据、设备或资料从哪里来?
题目场景是:一门课上百份简答题按参考答案逐句找得分点,两位教师前后批次标准漂移,学生申诉时拿不出可复核的给分依据。开题前先确认数据、设备与文献能否拿到;如果条件不足,优先缩小范围或换用公开数据集、公开年报与可借用的实验室设备。
Q.03做到什么程度算完成?
至少交付可运行评分系统、评分点标注集、源码与部署文档、一致性分析报告、论文。答卷导入与匿名、评分点拆解、分句与清洗、句向量编码、评分点匹配、规则兜底、分数汇总、一致性统计、复核界面、报告导出 四个部分都要有可演示或可复核的结果,并能说明“不报总体准确率,把误差拆成多给分、少给分与档位错三类并按评分点归因,能指出哪类评分点最难判、为什么难判。”带来的具体差异。