评估指南

建立清晰、可衡量的学生学习预期结果.

使命传达了学位课程的总体目的. 关于一般价值的简短陈述, 指导课程的原则, 项目提供的学习经验也应包括在内. Indicate how the mission is aligned with the mission of the department, 大学, 和大学.

使用以下提示作为指导:

  1. 学位课程的名称是什么?
  2. 这个项目的教育目的是什么?
  3. 这个项目的主要功能是什么?
  4. 该项目提供的主要活动或学习经验是什么?
  5. Does the mission implicitly or explicitly align the program with the mission of the department, 大学, 和大学?

学习成果传达了特定的知识, 技能, 以及学生在学位课程结束时应该能够展示的能力. Well-written outcomes include concrete action verbs that appropriately specify the level of learning indicated by the program.

使用以下提示作为指导:

  1. 发生了什么层次的学习(布鲁姆的行为动词)?
  2. 在课程结束时，学生应该展示哪些知识、技能或能力?

外部资源:

使用强烈的行为动词来描述学习

  • 原: 学生将了解80年代流行文化的基本组成部分.
  • 修改后: 从80年代流行文化学士学位课程毕业的学生将会发现 (a) relevant musicians, (b)电视节目和电影, (c)时尚, (d)当时的技术.

像“know”、“underst和”和“appreciate”这样的动词是不可测量的. 动作动词来自已建立的学习分类法(如.g. 花)如鉴定, 解释, 检查, 分析, 创建, 开发, 和评估更能描述学习过程. 修订后的结果扩大了80年代流行文化的主要组成部分.

选择代表最高学习水平的动作动词

  • 原: 从80年代流行文化学士学位课程毕业的学生将会发现, 解释, 总结, 并考察相关的音乐家.
  • 修改后: 从80年代流行文化学士课程毕业的学生将研究相关的音乐家.

识别和检查是两个不同层次的学习. 我们强烈建议你在学生的学习成果中使用一个动作动词. Examine is a higher level of learning than identify; therefore, 我们可以假设你能在检查前识别.

确保学生有足够的机会实现这些成果.

A curriculum map makes visible how courses in a curriculum align to the program's learning outcomes. 用最简单的说法, 课程地图建立在一个二维矩阵上, 结果排列在顶部，课程列在左侧. 一门课程对应的结果会在方框中做一个标记.

使用以下提示创建课程地图:

  1. 我们在映射什么，为什么?
  2. 这种方法包含或遗漏了学习环境的哪些部分?
  3. 谁应该参与对话?

外部资源

收集信息的最佳方式

Creating a curriculum map helps individual faculty connect the dots between their course 和 the goals of the program. 它还有助于确定应该在何处收集评估信息.

使用以下提示从教师处收集信息:

  1. 这门课程教授哪些学生学习成果?
  2. 哪些作业展示了这些结果?

外部资源

An important part of creating or updating a curriculum map is talking with faculty about what is happening in their courses 和 within the curriculum. 这个练习改善了关于课程的沟通，促进了课程的一致性.

使用以下提示来指导课程图的审查:

  1. How is this outcome taught in the course 和 to what level (introduced, reinforced, mastered)?
  2. 在所有的课程分组中发生了什么与在某些课程分组中发生了什么?

外部资源

 

通过节目讨论, 确定正在进行什么级别的学习, 在所有教员中, 对于每门课程. 使用此量表对学生在整个课程中的学习发展进行分类.

介绍 “I”=向学生介绍结果

加强 “R”=结果得到强化，学生有机会练习

掌握 “M”=学生已经有了足够的练习，现在可以证明自己掌握了

分析课程图可以帮助决定课程设置, 测序, 和调度. 地图还可以揭示课程的优势和劣势.

使用以下提示来指导关于课程的程序性讨论:

  1. 在关键课程中，所有的结果都是按照逻辑顺序处理的?
  2. 是否所有的关键课程都针对至少一个结果?
  3. 某些结果是否比其他结果得到更多的报道?
  4. 在评估之前，学生们对所有的结果都进行了练习吗?
  5. 所有的学生都这样吗?, 不管他们选了哪门选修课, 体验连贯的进展和所有结果的覆盖?

外部资源

制度的有效性 & 评估

联系

制度的有效性 & 评估

学生成功中心2楼
诺福克，弗吉尼亚州23529

757-683-3322 办公室
目录

系统地收集, 分析, 并解释证据，以确定学生达到我们期望的程度.

完善的测量方法收集相关的信息, 有意义的, 并且对程序是可操作的. Two 措施 should be used to evaluate each student learning outcome 和 should include at least one direct measure.

Measures are opportunities for programs to collect information about how well students are demonstrating or performing the Student 学习 Outcomes (SLOs).

使用以下提示作为指导:

  1. 学生在哪里以及如何展示学习成果?
  2. 衡量的目的是什么?它与结果有什么关系?
  3. How is the measure of student learning evaluated (rubric, faculty panel, answer key, survey, etc.)
  4. 用什么尺度、标准或标准来评估学生的学习成果?
  5. 各届政府如何一致地衡量这一点?
  6. 是什么让这一措施值得信赖和有用呢?

外部资源

选择直接措施(例如.g. 作业)和间接措施(如.g. 调查)第二

如果这个项目想要衡量学生的能力, “写一篇有说服力的文章，说明80年代的一个政治事件是如何影响流行文化的”, 然后...

  • 原: 高年级学生满意度调查
  • 修改后: Capstone argument paper 和 senior student satisfaction survey - questions related to confidence in written communication 技能

示范性评价采用两种方法来评价学生的学习. 对学生作业的直接衡量，比如考试, 论文, 项目提供了最令人信服的评估证据. 间接措施，如调查，可以作为直接措施的补充.

通过添加细节来显示度量和结果之间的联系

The overall satisfaction rate of the senior student survey doesn't tell us very much about written communication. Its best to specify 和 report the specific survey questions or constructs that relate to the learning outcome.

表现出对高年级课程学习的掌握

如果这个项目想要衡量学生的能力, "运用理论解决现实问题", 然后...

  • 原: PCUL 201项目
  • 修改后: PCUL 300/400级项目及规格

Its best to collect programmatic assessment data throughout the curriculum in places where students are asked to demonstrate mastery or advanced levels of learning. An upper division course project is a better example of "application 技能" than a lower or intermediate level course project.

通过共享评估开发有用和有意义的数据

  • 修改后: PCUL 300/400级项目和程序的开发和验收

在这里，该计划制定了一个共同的标准来评估这个项目. 该标准是根据该地区国家制定的标准改编的. This measure is more reliable 和 valid than course projects that are assessed with different instruments/rubrics.

*这是一个评估最佳实践.

A Target is an established achievement level that states how well 和 how many students in the program should be able to demonstrate a particular knowledge or skill.

使用以下提示作为指导:

  1. 期望的绩效标准是什么?
  2. 有多少学生能够达到这个成绩标准?

说明绩效标准和人口百分比

  • 原: 学生将在考试中获得B或更好的成绩
  • 修改后: 80%的学生将在考试中获得75%或更高的分数

The revised target articulates the performance level as well as the number of students expected to reach the target.

结果 simply report how well students are performing against the goals set by the program. 目标实现状态(例如. 超过，满足，部分满足，不满足)也应注明.

使用以下提示作为指导:

  1. 结果是否报告了目标中描述的信息?
  2. 如果使用百分比或其他计算的最终计数, 创造最终结果所涉及的数字是什么? (e.g. 87/94=92.55%)
  3. 该计划是否清楚地说明了目标的实现(目标状态)??

说明绩效标准和人口百分比

  • 原: 学生将在考试中获得B或更好的成绩
  • 修改后: 80%的学生将在考试中获得75%或更高的分数

The revised target articulates the performance level as well as the number of students expected to reach the target.

用你的结果将目标转化为发现

  • 原: 70%
  • 修改后: 70% (70/100) of students scored 75% or better on the designated test questions related to the outcome (methodology)

结果应该与目标的格式相似(见上文)。. Adding the number of students represented in the percentage adds context 和 value to the data.

使用结果信息来理解和提高学生的学习(Suskie, 2014).

这就是程序回答“那又怎样”的地方?”的问题. This asks programs to extrapolate meaning from the results 和 provide additional detail or context to fully 解释 the results to an outside reader. 可以进行不同层次的分析来理解这些信息. It is especially important to compare learning environments 和 分析 the results over time to look for trends. This is an opportunity for faculty to make sense of the results against the larger l和scape of the program 和 factors impacting the student learning outcome.

使用以下提示作为指导:

  1. 学生在这方面学习的优势和劣势是什么?
  2. For programs with both online 和 face-to-face degree options: how does the performance of these unique learning environments compare?
  3. 与往年相比，结果如何?
  4. 结果如何适应学生在项目中学习的大环境?
  5. 如何在项目内部分享结果?

对数据进行总结和反思

  • 原: 附测试题项分析.
  • 修改后: 根据试题项分析(附), 学生们成功地回答了方法论问题. 然而，当涉及到图表时，他们很难回答问题. 这些问题还需要精通数学. 这些结果比去年略有上升，但仍低于该计划的目标. The curriculum committee will review these results 和 determine how to improve this outcome across the upper division courses.

这要求程序跟踪并描述完成的行动计划, 修改, 或者是程序的改进. This is an opportunity for programs to tell their story 和 connect the dots between the student learning outcome, 评估促使采取行动的结果, 以及所做的修改. 该计划应概述并确定其变化对学生学习的影响.

使用以下提示作为指导:

  1. 为什么要做这些改变? (e.g.(学生的学习成果和促使他们采取行动的信息)
  2. 今年或前几年有哪些变化影响了学生的学习?
  3. 这对学生的学习有什么影响?

用三个简单的步骤来写学习改进

  • 原: 结果比去年有所改善.
  • 修改后: Over the past three years, methodology related scores were below established program 目标. 在这方面的额外强调是在三个关键课程中实施的. 课程作业和大纲在过去两年内进行了修订. 结果，我们看到了方法论分数的提高.

A well written improvement includes three parts 1) a recap of the data/context that spurred action, 2)对所采取行动的描述, 3)随后预期或报告的结果.

描述项目所采取的行动并考虑其影响

  • 原: 将创建补充材料.
  • 修改后: 在过去的几年里，这个项目的考试成绩有所下降. 今年举行了考试准备和辅导课. 我们今年的分数增长很小. 这是我们继续关注的问题. Additional interventions are planned (see our action plan to 创建 supplemental materials).

这个语句描述了程序所采取的行动(过去式). (将要发生的行动——将来时——是行动计划).

这就是程序回答“现在怎么办”的地方?”的问题. 项目 should 解释 their process for sharing 和 using assessment results to make decisions in areas such as curriculum, 教育学, 以及其他影响学习的方面. 评估的优势不在于它为问题提供快速修复, 但它能促进活跃, 通知, 通过教师之间的讨论系统地改进一个项目. 这是一个回顾学生学习数据并作为一个项目做出决定的机会.

使用以下提示作为指导:

  1. How is assessment information about the quality of learning shared 和 used for program decision making in areas such as curriculum, 教育学, 以及其他影响学习的方面?
  2. 结果表明需要采取哪些行动?
  3. 该项目将采取哪些具体行动来维持或改善这一结果? 这些行动的时间框架是什么?

概述任务，以提高学生的学习

  • 原: 教师将开会讨论评估数据的结果和任何必要的更改.
  • 修改后: 教师们开会讨论评估结果. Two faculty members 和 a graduate student will 开发 supplemental materials to improve the weak areas of student performance. 他们将在秋季学期完成这项工作，并在春季试用这些资源. 他们将在项目静修时与教师分享他们的反馈和材料.

行动计划应该报告那些有意采取的行动. 讨论数据的计划不是足够的行动项目. Work with your program to review results, interpret information, 和 draft appropriate action plans.