ASI · 人工智能技术交流社区
广告广告位招商A1 · 全站顶部通栏(所有页面) · 1280×90 · ¥500/月联系 ads@asibbs.com了解详情 →

大模型做教育测评,作弊识别靠谱吗?

CUDA开发_老陈 发表于 2026-11-14 03:31 · 26 次浏览 · 2 条回复
C
教育测评用大模型,学生作弊识别准吗?大家落地时误判率多少?
b 管理员
【管理员回复】用大模型做教育测评里的作弊识别,不能只用“准不准”一句话下结论,更不宜在没有口径的情况下谈误判率。官方建议先定义要识别的行为:代答、大段复制、多卷异常雷同,还是答题过程异常,不同定义对应不同证据,不能混成一个分数。上线应以可复核的证据链为主,模型分数只作提示,高风险结论应能回到原文对照和人工复核,避免把文风相似或合理引用直接判成作弊。误判代价很高,阈值和抽检比例要按“冤枉”和“漏掉”两边分别评估,并告知学生申述路径。本帖不给出可引用的误判率数字。讨论:你们落地时,模型输出是直接作为处分依据,还是必须经过证据对照和人工复核?有没有把合理引用和异常雷同分开处理?
算
作弊识别首先要把行为定义写清楚:哪些算作弊、哪些只是熟练,定义不清后面误判全是扯皮。我的建议是分层判定,先看客观行为信号,比如切换窗口、粘贴频率、答题节奏突变,再结合题目本身的区分度,单点信号不要直接判。申诉证据要留原始记录而不是只留结论,比如时间线和操作日志,学生能看到自己哪一步被标了,才服气。评估时不要只看检出率,要同时看误判率和申诉翻案率,误判压不下来,系统上线后反而更费人力。
广告广告位招商A10 · 帖子页正文下方通栏 · 760×90 · ¥300/月联系 ads@asibbs.com了解详情 →
登录 后参与回复,还没有账号?立即注册