Skip to main content

ORIGINAL 项目分析

项目分析可提供关于综合表现、测试成绩以及各个问题的统计数据。该数据能帮助您找出学生成绩对比结果较差的问题。

项目分析的用途:

  • 为将来的测试管理改进问题或调整当前尝试的计分。

  • 与全班讨论测试结果

  • 为补课提供基础

  • 改进课堂教学

例如

在进行项目分析之后,您注意到绝大多数学生对一个问题的回答不正确。为什么成功率很低?

  • 该问题的用词是否令人困惑?

  • 答案选项是否含糊?

  • 是否为学生成功回答此问题提供了要学习的合适内容?

  • 要学习的内容是否便于访问且清楚明了?

根据您的发现,您可以改进测试问题,以使其真正地评估学生知道或不知道的内容。

对测试运行项目分析

您可以对已提交尝试的已部署测试运行项目分析,但不能对调查执行该操作。

测试可以包括一次或多次尝试、问题集、随机组卷、自动评分的问题类型以及需要手动评分的问题。测试中如有已手动评分但尚未指定分数的问题,则只为已打分的问题生成统计数据。对问题手动评分后,再次运行分析。则生成已手动评分的问题的统计数据,同时更新测试的汇总统计数据。

要获得最佳结果,请在学生提交所有尝试且您为所有手动评分问题评分后,针对测试运行分析。请注意,统计数据会受测试尝试次数、参加测试的学生类型以及偶然误差的影响。

  1. 具有评分权限的角色(教师、评分者以及助教)可在测试工作流程中的三个位置访问项目分析。

    • 在内容区中部署的测试

    • 测试页面上列出的已部署测试

    • 测试的成绩中心列

  2. 访问测试的菜单,然后选择项目分析

  3. 选择测试菜单中,选择一项测试。只有已部署的测试会被列出。

  4. 选择运行

  5. 可用的分析区域中选择新报告的链接,或在页面顶部的状态操作确认中选择查看分析

    在可用的分析区域中选择新报告的链接,或在页面顶部的状态操作确认中选择查看分析。

注意

您可以在可用的分析区域中访问之前运行的分析。

“项目分析”页面上的测试总结

测试总结提供关于整个测试的数据。

测试的“项分析”页面
  1. 通过编辑测试可访问测试面板,您可以从中对测试进行更改。

  2. 查看测试统计数据:

    • 可能的分数:测试的总分数。

    • 可能的问题:测试中的问题总数。

    • 正在进行的尝试:当前参加测试但尚未提交测试的学生人数。

    • 已完成的尝试次数:提交的测试次数。

    • 平均成绩:用星号表示的成绩表示某些尝试未评分,并且在所有尝试评分后平均成绩可能会发生变化。显示的分数是在成绩中心内报告的测试的平均分数。

    • 平均时间:所有提交尝试的平均完成时间。

    • 区分度:显示属于“好” (大于 0.3)、 “一般” (0.1 到 0.3 之间)和“差” (小于 0.1)类别的问题数量。当问题的难度值为 100% 或所有学生在某个问题中获得相同的分数时,对比值将显示为无法计算。对比值属于良好一般类别的问题可以更好地区分知识水平较高和较低的学生。建议对属于较差类别的问题进行复查。

    • 难度:显示属于简单(大于 80%)、中等(30% 到 80% 之间)和困难(小于 30%)类别的问题数量。难度指的是正确回答问题的学生百分比。建议对属于简单困难类别的问题进行复查,这些问题用红色圆圈标明。

注意

项目分析计算只使用已评分的尝试。尝试正在进行中时,会被忽略,直到其完成提交并且您再次运行分析报告。

“项目分析”页面上的问题统计数据表

问题统计数据表为测试中的每个问题提供项目分析统计数据。建议复查的问题用红色圆圈标明,以便您快速浏览可能需要修改的问题。

一般来说,好的问题属于以下类别:

  • 难度值为中等(30% 到 80%)

  • 对比值为良好一般(大于 0.1)

一般来说,建议进行复查的问题属于以下类别。这些问题可能质量较低,或无法正确地打分。

  • 难度值为简单 (> 80%) 或困难 (< 30%)

  • 对比值为较差 (< 0.1)

过滤问题屏幕,带有显示过滤位置和方式的标签
  1. 问题类型对比难度筛选问题表。

  2. 要研究特定问题,请选择标题并查看问题详细信息页面。

  3. 每个问题的统计数据都显示在该表中:

    • 辨别力:表明问题如何区分了解主题的学生和不了解主题的学生。如果正确回答某问题的学生在测试中也取得了好成绩,则此问题适合用作对比项。值的范围可以从 -1.0 到 +1.0。如果问题的辨别值小于 0.1 或负面,则该问题将被标记为以供复查。当问题的难度值分数为 100% 或所有学生在某个问题上获得相同的分数时,无法计算对比值。

      对比值使用 Pearson 相关系数进行计算。X 表示每个学生在某个问题上获得的分数,Y 表示每个学生在测试中获得的分数。

      用于计算判别值的皮尔逊相关系数的数学公式。

      以下变量分别是标准分数、样本均值和样本标准偏差:

      标准分数、样本均值和样本标准差是计算判别值的皮尔逊相关系数的核心要素。
    • 难度:正确回答问题的学生百分比。难度百分比及其类别一起列出:简单(大于 80%)、中等(30% 到 80%)和困难(小于 30%)。难度值的范围为 0% 到 100%,较高的百分比表示问题较简单。属于“简单”或“困难”类别的问题会被标记以供复查。

      介于及格和满分之间略微高于中等程度的难度水平可以更好地区分已掌握测试资料的学生与未掌握测试资料的学生。难度值较高不能保证对比程度也较高。

    • 成绩尝试次数:完成成绩的问题尝试次数。已评分尝试的数量越大,计算出的统计数据越可靠。

    • 平均成绩:用星号表示的成绩表示某些尝试未评分,并且在所有尝试评分后平均成绩可能会发生变化。显示的分数是在成绩中心内报告的测试的平均分数。

    • 标准差:衡量分数与平均分数的偏差程度。如果对分数进行严格分组,大部分数值接近平均值时,标准偏差较小。如果数据集分散较广,数值与平均值差距较大时,标准偏差较大。

    • 标准误差:对学生分数因偶然而变化的估计量。测评过程的标准误差越小,测试问题所提供的测量数据越准确。

查看单个问题的问题详细信息

您可以研究标记以供复查的问题并查看学生表现。

项目分析页面上,滚动至问题统计数据表。选择一个链接的问题标题可访问问题详细信息页面。

单个问题的问题详细信息视图
  1. 使用上一页下一页图标可按顺序翻阅问题。您也可以跳至第一个或最后一个问题。

  2. 选择编辑测试可访问测试面板,您可以从中对测试进行更改。

  3. 汇总表显示问题的统计数据。您可以查看上一部分中各种统计数据的描述。

  4. 显示问题文本和答案选项。所显示的信息因问题类型而异:

74. 为问题类型提供的项目分析信息

提供的信息类型

问题类型

选择各个答案选项的学生数

-和-

这些答案在类四分位数中的分布

单项选择题

多项选择题

判断题

是非题

倾向性调查/里克特题

选择各个答案选项的学生数

匹配题

排序题

多项填空题

答对、答错或跳过问题的学生数

计算公式

计算题

填空题

图像定位

智力问答题

仅问题文本

论述题

附件解答题

简答题

混乱的句子——还包括学生选择的答案



符号说明

将在问题旁边显示符号以警告您可能出现的问题。

符号图例:紫色圆圈是 Review 推荐。黄色三角形是部署后问题可能已更改。星号是 并非所有提交的内容都已评分。(QS) 是问题集。(RB) 是随机块
  • 建议查看:当鉴别值小于 0.1 时触发。此外,当难度值大于 80%(问题过于简单)或小于 30%(问题过于困难)时也会触发。请复查问题以确定是否需要修改问题。

  • 部署后问题可能已更改:表示部署测试后问题的一部分发生了变化。更改可能意味着该问题的数据可能不可靠。问题更改后提交的尝试可能受益于更改。

    注意

    对于恢复的课程,不会显示此指示符。

  • 并非所有提交的内容都已成绩:针对包含需要手动成绩的问题(如论文问题)的测试显示。在一个包含学生尝试 50 次的论述题的测试中,此指示符将一直显示,直到您对全部 50 次尝试评分。分析仅使用您在运行报告时已评分的尝试。

  • (QS)(RB):表示问题来自问题集或随机块。由于问题是随机发放的,因此某些问题的尝试次数可能多于其他问题。

多次尝试、问题覆盖和问题编辑

分析按以下方式处理多次尝试、覆盖和其他常见情况:

  • 学生多次进行测试时,最后提交的尝试将用作分析的输入数据。例如,一项测试允许三次尝试,学生 A 完成了两次尝试,正在进行第三次尝试。学生 A 的当前尝试将计入正在进行的尝试所列的数字。学生 A 之前的任何尝试都不包含在当前的分析数据中。当学生 A 提交第三次尝试后,后续的分析将包含学生 A 的第三次尝试。

  • 成绩中心覆盖不影响分析数据,因为分析根据已完成的学生尝试生成问题的统计数据。

  • 手动评分的问题或对问题文本、正确答案选项、部分计分或分数所做的更改在分析报告中不会自动更新。再次运行分析,查看更改是否会对数据造成影响。

示例

项目分析可帮助您为将来的测试管理改进问题。您也可以修正当前测试中误导性或模棱两可的问题。

  • 一道单项选择题进行了标记以供您复查。大部分排名前 25% 的学生选择了答案 B,但 A 是正确答案。您意识到自己在创建问题时未选择正确答案。您编辑测试问题,系统会自动进行重新评分。

  • 在一道单项选择题中,相等数目的学生选择了 A、B 和 C。检查答案选项,以确定答案是否模棱两可、问题是否过于困难或是否未涵盖资料。

  • 系统建议您复查某个问题,因为其难度被划分为困难类别。您确定该问题是困难问题,但仍然保留它,以便充分测试课程目标。