This information applies only to the Ultra Course View.

您可以在课程中与多个评分者共同拥有评分职责。

什么是并行评分?

您可以指定课程中的特定用户对评估提交分组进行评分。评分者无法查看其他评分者的成绩、反馈、学生文件上的注解以及评分量规。他们并行评分并提供临时成绩。默认评分角色包括教师、评分者和助教。

教师角色是默认的最终评分者或核对者。核对者复查临时成绩并确定学生看到的最终成绩。您可以向具有评分权限的一位或多位用户指定核对成绩的权限,并删除您的核对权限。

一些机构将并行评分视为“密封评分”。

核对者权限

  • 核对者可以查看 评分者的成绩和反馈,但不能查看学生文件中的评分量规或注解。
  • 核对者确定最终成绩或对最终成绩进行核对。
  • 核对者可以改写最终成绩。
  • 核对者可以发布成绩。如果匿名评分已启用,则核对者可以在发布成绩时显示学生姓名。

目前,您无法为组作业启用并行评分。您也无法向启用并行评分的评估添加问题。


为何使用并行评分?

来自多个评分者的评分和反馈可提高可靠性、一致性并消除偏见。在确定每个学生的最终评估成绩时,核对者会在同一份作业样本中看到不止一条评价。

评分的公平性和公正性通常是机构的要求或关注的重点。并行评分有助于尽可能地控制评分者间的偏差。

对于大班级,您可以在助教和其他评分者间划分评分任务。对于合并的课程,您可以为每个评分者指定班级的某一部分。


并行评分工作流程

按照以下步骤启用并行评分并采用这种方式评定成绩:

  1. 启用并行评分
  2. 评分者:访问尝试并对其评分
  3. 最终评分者:核对成绩

在创建评估时,您也可以启用匿名评分,使评分者看不到学生的身份。此外,您还可以启用 SafeAssign 选项以防止抄袭。

详细了解匿名评分

详细了解 SafeAssign


1. 启用并行评分

您可以在创建评估时启用并行评分并指定评分者。即使学生提交后,您也可以启用并行评分。系统会随机指定您选择的评分者,这样每个学生的评估分配有两个评分者。评分工作量是在各个评分者中平均分配。评分者只能打开指定给他们的学生所提交的内容。

学生不会收到评估有多个评分者的通知,除非您通知他们。学生只会看到核对者提供的最终成绩和反馈。

目前,当并行评分启用时,您无法创建小组或添加问题。评分者、助教和课程内容构建者无法启用或禁用并行评分。

在评估的设置面板中,选中评估选项部分中的每位学生两位评分者复选框。

选择显示的指定评分者链接。

The Assignment settings panel is open with the "2 graders per student" checkbox selected and the Evaluation options section pointed and highlighted.

指定评分者页面

指定评分者页面上,您指定的角色仅属于当前评估。

The Assign Graders page is open with 1) the "Assign All as Graders" option highlighted, 2) the three dots menu next to the usernames selected with the "Grader" and "Reconciler" options displayed, and 3) the "Unassigned All Reconcilers" option highlighted.

指定评分者

您的助教和评分者会显示在第一个已取消指定列表中。

您可以选择所有带有全部指定为评分者链接的列表或打开每个用户的菜单,然后选择评分者核对者。指定的评分者会显示在评分者列表。打开评分者的菜单,然后选择取消指定(如果需要)。

提醒:评分工作量是在各个评分者中平均分配。

指定核对者

具有教师角色的用户将显示在核对者列表中。打开核对者的菜单,然后选择取消指定(如果需要)。例如,您可以让助教确定所有最终成绩,并自行取消指定。您可以拥有多个核对者。

任何用户都不能同时担任评分者和核对者。但是,对于某一评估,您可以为某位用户指定不同的角色,甚至在学生进行提交后也可以。

您可以选择列表的全部取消指定链接,以便从评分者核对者删除所有用户。

完成后,选择保存。并行评分最好是有多位评分者和至少一位核对者参与。如果您没有至少两位评分者和一位核对者,则系统会向您发出警告。未达到最低建议,也允许您保存。

如果我取消指定用户或禁止他们在花名册中访问课程,会发生什么情况?

在评分已经开始后,如果对评分者和核对者进行更改,请务必小心。

  • 取消指定的核对者会失去访问最终成绩的权限,但之前所做的工作会予以保留。如果某位核对者指定了一些最终成绩,但后来他被取消指定为核对者或者从花名册中抹去,但他指定的最终成绩仍将保留。其他核对者可以对这些最终成绩进行更改。
  • 取消指定的评分者之前完成的评价将会保留。未完成的评价不再与这些学生关联。系统会将工作平均分配给其余的评分者。

    如果学生已有来自两位评分者的成绩,其中一个评分者被取消指定,则这两个成绩均会保留。添加第三个评分者。即使您已核对并发布了一些成绩,也会添加第三个评分者。如果您尚未核对成绩,则第三个评分者仅会看到已准备好接受评分的尝试。如果在并行评分过程中移除了某一评分者,则对于某些尝试,您可能会有三个成绩需要核对。

    如果您禁用了某位用户访问花名册的权限,后来又允许访问,则该用户会显示在指定评分者页面的已取消指定列表中。

禁用并行评分

您可以对评估禁用并行评分,即便存在提交或评分者已提供成绩和反馈的情况下也可以。评分者的临时成绩会被移除,但系统仍会将其保留。如果再次启用并行评分,则会恢复先前的临时成绩和反馈。

如果您在发布成绩后禁用并行评分,则最终成绩将保留。不保留临时成绩的记录。

评分者、助教和课程内容构建者无法禁用并行评分。


2. 评分者 > 访问尝试并对其评分

当您启用并行评分时,评分者只能访问指定给他们的评估尝试。目前,当并行评分工作流程中的尝试已准备好接受评分时,评分者不会在课程动态中收到通知。当评分已准备好接受核对时,核对者会收到通知

作为最终评分者,核对者无法为评分者指定成绩。

The Submissions page is open with the number of submissions to grade highlighted and the status column also highlighted. The status column shows the list of attempts that are left to be graded.

在匿名评分工作流程中,评分者也只能访问指定给他们的提交内容。在学生进行提交之前,评分列表为空。

The Submissions page is open with the anonymous submissions list on screen. The notification that indicates the anonymous grading is in progress is displayed.

目前,学生或核对者看不到评分者添加到学生文件的注解。

评分者为他们的提交提供成绩和反馈后,他们的工作就完成了。评分者无法发布成绩。教师和核对者无法查看评分者的评分量规或编辑评分者的成绩和反馈。

The Submissions page is open with 1) the submissions list displayed, 2) the Status column with the "Complete" message displayed on each submission, and 3) the Grade column with no grades assigned on each submission.

在核对者发布成绩之后,评分者只能查看核对者的最终成绩、评分量规和反馈。评分者无法在成绩发布后编辑其评价。

An example submission is open with the "Complete" message displayed, 2) a "93.2/100" grade assigned, and 3) the "Posted" message on screen.

多次尝试

当您允许对评估进行多次尝试时,评分者可以在提交页面查看其工作量。即使评分者未对所有尝试进行评分,最终评分者也可以核对成绩。

The Submissions page is open with 1) the submissions list displayed, 2) an example username selected and highlighted, and 3) the Multiple Attempts grading panel opened with two attempts submitted.

3. 最终评分者:核对成绩

当成绩已准备好接受核对时,您会收到一份活动动态通知。在指定的评分者对一位学生的尝试评分后,您会收到通知。

"Grades ready to reconcile" notification displayed in the activity stream of the Instructor's view.

核对单个尝试

在确定最终成绩前,您可以先查看每位评分者的成绩和反馈。即使评分者未对所有尝试进行评分,您也可以核对成绩。

An example submission is open with 1) one attempt ready to reconcile on screen, 2) two different grades assigned, 3) the feedback icon selected and highlighted, and 4) the feedback panel opened with two different feedbacks on screen.
  1. 指定成绩。选择成绩药丸以指定成绩或打开评分量规。提醒:您不能在学生文件中查看评分者的评分量规或注解。您也无法编辑评分者的成绩和反馈。
  2. 复查反馈。选择反馈图标可打开反馈面板,并查看评分者的反馈。
  3. 添加您的反馈。当您发布最终成绩时,学生不会看到评分者的反馈,但您的反馈会显示。

在您发布最终成绩后,评分者只能看到最终成绩和反馈。评分者无法在最终成绩发布后访问并编辑其评价。

An example submission is open with the "Complete" message displayed, 2) a "93.2/100" grade assigned, and 3) the "Posted" message on screen.

学生视图

学生仅看到核对者的成绩、反馈和评分量规。学生不会看到各个评分者提供的任何内容。

An example submission from the Student's view is open with a 1) final grade assigned and displayed and 2) the feedback panel opened with a text on it.

全部核对

您不必逐一核对每个成绩。在一次操作中,您可以使用评分者一次或多次评出的成绩来核对所有尝试。例如,如果您对评分者有信心并且想要将其评分成绩的平均值指定给每次尝试,则您可以“批量”核对。

在核对成绩之前,所有评分者不一定要全部完成评分。您也不必等待所有学生都完成尝试。您可以自动核对现有尝试的成绩。此操作不能撤消。核对不会覆盖手动核对或先前核对的成绩。

提交页面上,选择全部核对链接。选择要使用的成绩:

  • 平均成绩
  • 最高成绩
  • 最低成绩

如果学生已进行过尝试,则您始终会看到准备接受核对的尝试。在尝试准备好接受核对之前,评分者不必指定成绩和反馈。

The Submissions page is open with the "Reconcile All" option highlighted.

如果您选择核对所有成绩,并且已将评分量规与评估相关联,则覆盖标签会仅显示在提交列表页面上。

详细了解覆盖成绩

核对多次尝试

当您允许某次评估可以多次进行尝试时,您将看到评分者对每次尝试的评分。然后,您为每次尝试核对成绩。将按照您创建测试时选择的对尝试评分设置,来计算多次评估尝试的最终成绩。

选择尝试或成绩药丸,以查看学生的作业并核对成绩。您也可以对现有尝试的所有成绩进行批量核对。

The Submissions page is open with 1) the submissions list displayed, 2) an example username selected with the "2 attempts to reconcile" message highlighted, and 3) the Multiple attempts grading panel opened with the first attempt highlighted.

并行评分不会影响最终成绩的计算方式。但是,在核对尝试之前,无法计算最终成绩。当核对这些尝试时,最终成绩会显示在成绩簿中。例如,如果根据获得最高评分的尝试计算最终成绩,则在核对至少一次尝试后,会立即显示最终成绩。但是,当学生提交更多尝试后,该成绩可能会发生变化。

核对之后,您可以为学生发布最终成绩。


并行评分和课程转换

将课程转换为 Ultra 课程视图时,原始课程中的委派评分设置不会转移过来。