仲裁

本篇解决:多名评卷员给分出现分歧、或评卷员标了问题卷之后,这份卷子交给谁、怎么定夺。


哪些卷子进仲裁

  • 超阈值卷:评 2 轮及以上时,各轮给分的极差超过了「满分 × 分歧仲裁阈值」(建任务时设,默认 20%)。
  • 问题卷:评卷员标记为空白 / 答非所问 / 内容异常的卷子。

谁来裁:仲裁链

仲裁不是一个单独的岗位,而是身份上的一种能力:给某个身份打开参与仲裁开关,他的管理范围就是他的仲裁范围。开着这个开关的人按固定顺序组成四级链:

小组长 → 题目组长 → 科目组长 → 专家

(图:仲裁链)

一份分歧卷由第一个有覆盖者的层级处理,某一级无人或范围不覆盖这份卷子就自动跳过。四级都没有人时,由任务创建者兜底处理。

任务详情的仲裁链区块把这条链摊开:一行摘要显示各级人数,展开可看每级都有谁、管辖什么范围。想调整,就去人员管理里给组长身份打开 / 关掉「参与仲裁」,或增删参与仲裁的专家——分工改了,链跟着变。

专家是项目级身份,作用于该项目的全部阅卷任务,默认参与仲裁,处在链的末级。


处理界面

处理人在「我的阅卷」卡片点「待仲裁 N」,或从任务详情点 仲裁队列 进入(页面地址 /gradingMgt/workbench/,仲裁视图)。

(图:仲裁视图)

和普通评卷不同,仲裁视图展示全部信息:这份卷子的当前仲裁级、各轮评卷员的给分、AI 参考分与理由、参考答案与评分标准、作答全文——信息齐全,便于裁定。左侧队列只列轮到你处理的卷子;任务覆盖多份测验时按「测验 > 题」两级排列。

四种处理方式:

操作结果
仲裁给分给出一个最终分,这份卷子以仲裁分为终,覆盖各轮评卷员的分
作废这份卷子不计分,既不计入被试总分,也不计入满分
上报下一级自己拿不准时抬到链的下一级(可填上报原因),无人的层级自动跳过;到了末级就没有这个按钮
移交处理人指定某个人来处理。候选=范围覆盖这份卷子且参与仲裁的组长与专家(可越级、可平级),移交后该卷只对新处理人可见

作废用于确实无法评分的卷子(如完全空白、内容异常)。作废后该题该被试的分数为空,参与统计时按「不计入」处理。

仲裁给分后,这道题该被试的最终分就固定为仲裁分(除非后续被抽查改判),成绩单、导出、分析都读它。


管理员看到的是监控清单

不在仲裁链上的人(如阅卷管理员、没打开「参与仲裁」的组长)点进待仲裁,看到的是只读监控清单:范围内全部待仲裁的卷子,每份标着当前由谁处理,条数与任务详情「待仲裁」卡对得上。裁定动作仍由链上的人做。


相关功能