评估指南

建立清晰、可衡量的学生学习预期结果.

The mission communicates the overarching purpose of the degree program. 关于一般价值的简短陈述, 指导课程的原则, 和 learning experiences provided by the program should be included. 说明使命是如何与部门、学院和大学的使命相一致的.

使用以下提示作为指导:

  1. 学位课程的名称是什么?
  2. 这个项目的教育目的是什么?
  3. 这个项目的主要功能是什么?
  4. What are the primary activities or learning experiences provided by the program?
  5. 任务是否隐含或明确地使项目与部门的任务保持一致, 大学, 和大学?

学习成果传达了特定的知识, 技能, 和 abilities that students should be able to demonstrate at the end of the degree program. 写得好的结果包括具体的动作动词,这些动作动词适当地指定了项目所指示的学习水平.

使用以下提示作为指导:

  1. 发生了什么层次的学习(布鲁姆的行为动词)?
  2. What knowledge, skill, or ability should students demonstrate at the end of the program?

外部资源:

使用强烈的行为动词来描述学习

  • 原: 学生将了解80年代流行文化的基本组成部分.
  • 修改后: 从80年代流行文化学士学位课程毕业的学生将识别(a)相关的音乐家, (b)电视节目和电影, (c)时尚, (d)当时的技术.

Verbs like "know", "underst和", 和 "appreciate" are not measurable. 动作动词来自已建立的学习分类法(如.g. 花)如鉴定, 解释, 检查, 分析, 创建, 开发, 和评估更能描述学习过程. The revised outcome exp和s on the majors components of 80s Pop 文化.

Select the action verb that represents the highest level of learning

  • 原: Students graduating from the BA program in 80s Pop 文化 will identify, 解释, 总结, 并考察相关的音乐家.
  • 修改后: Students graduating from the BA program in 80s Pop 文化 will 检查 relevant musicians.

识别和检查是两个不同层次的学习. We strongly suggest that you use one action verb within a student learning outcome. Examine is a higher level of learning than identify; therefore, 我们可以假设你能在检查前识别.

Ensure that students have sufficient opportunities to achieve those outcomes.

课程图显示了课程中的课程如何与项目的学习成果相一致. 用最简单的说法, 课程地图建立在一个二维矩阵上, with the outcomes arrayed across the top 和 courses listed down the left side. 一门课程对应的结果会在方框中做一个标记.

使用以下提示创建课程地图:

  1. 我们在映射什么,为什么?
  2. What parts of the learning environment are included or left out by this approach?
  3. 谁应该参与对话?

外部资源

收集信息的最佳方式

创建课程地图可以帮助每个教师将他们的课程和项目目标联系起来. It also helps determine where assessment information should be collected.

使用以下提示从教师处收集信息:

  1. 这门课程教授哪些学生学习成果?
  2. 哪些作业展示了这些结果?

外部资源

创建或更新课程地图的一个重要部分是与教师讨论他们的课程和课程内发生的事情. This exercise improves communication about curriculum 和 promotes program coherence.

使用以下提示来指导课程图的审查:

  1. 这个结果是如何在课程中教授的,在什么程度上(引入、加强、掌握)?
  2. What is happening in all course sections vs what is happening in some course sections?

外部资源


 

通过节目讨论, 确定正在进行什么级别的学习, 在所有教员中, 对于每门课程. Use this scale to categorize the 开发ment of student learning across the curriculum.

介绍 “I”=向学生介绍结果

加强 "R" = the outcome is reinforced, 和 the students afforded opportunities to practice

掌握 "M" = students have had sufficient practice 和 can now demonstrate mastery

Analyzing the curriculum map can help inform decisions about course offerings, 测序, 和调度. The map can also reveal strengths 和 weaknesses within the curriculum.

Use the following prompts to guide a programmatic discussion about the curriculum:

  1. 在关键课程中,所有的结果都是按照逻辑顺序处理的?
  2. 是否所有的关键课程都针对至少一个结果?
  3. 某些结果是否比其他结果得到更多的报道?
  4. 在评估之前,学生们对所有的结果都进行了练习吗?
  5. 所有的学生都这样吗?, 不管他们选了哪门选修课, 体验连贯的进展和所有结果的覆盖?

外部资源

系统地收集, 分析, 和 interpret evidence to determine how well students are meeting our expectations.

完善的测量方法收集相关的信息, 有意义的, 并且对程序是可操作的. 应使用两种方法来评估每个学生的学习成果,并应至少包括一种直接方法.

衡量标准是项目收集有关学生展示或执行学生学习成果(slo)的信息的机会。.

使用以下提示作为指导:

  1. 学生在哪里以及如何展示学习成果?
  2. What is the purpose of the measure 和 how does it relate to the outcome?
  3. 如何评估学生的学习水平(题目、教师小组、答案、调查等).)
  4. What scale, criteria, or st和ard is used to evaluate the student learning outcome?
  5. 各届政府如何一致地衡量这一点?
  6. 是什么让这一措施值得信赖和有用呢?

外部资源

选择直接措施(例如.g. 作业)和间接措施(如.g. 调查)第二

如果这个项目想要衡量学生的能力, "write a cogent argument about how a political event in the 80s shaped pop culture", 然后...

  • 原: 高年级学生满意度调查
  • 修改后: 顶点论证论文和高年级学生满意度调查-与书面沟通技巧信心有关的问题

Exemplary assessment uses two 措施 to evaluate student learning. 对学生作业的直接衡量,比如考试, 论文, 项目提供了最令人信服的评估证据. Indirect 措施, like surveys, can be useful as a supplement to the direct 措施.

通过添加细节来显示度量和结果之间的联系

大四学生调查的总体满意度并没有告诉我们很多关于书面交流的信息. 最好详细说明并报告与学习结果相关的具体调查问题或结构.

表现出对高年级课程学习的掌握

如果这个项目想要衡量学生的能力, "运用理论解决现实问题", 然后...

  • 原: PCUL 201项目
  • 修改后: PCUL 300/400级项目及规格

在要求学生展示掌握或高级学习水平的地方,最好在整个课程中收集程序性评估数据. 高年级课程项目是“应用技能”的一个更好的例子,而不是较低或中级水平的课程项目.

通过共享评估开发有用和有意义的数据

  • 修改后: PCUL 300/400 level project 和 program 开发ed 和 accepted rubric*

Here the program has 开发ed a shared rubric to evaluate this project. The rubric was adapted based on a nationally 开发ed rubric in this area. 这种方法比使用不同工具/标准评估的课程项目更可靠和有效.

*这是一个评估最佳实践.

目标是一个既定的成就水平,它说明了项目中有多少学生应该能够展示某种特定的知识或技能.

使用以下提示作为指导:

  1. 期望的绩效标准是什么?
  2. How many students should be able to achieve this st和ard of performance?

说明绩效标准和人口百分比

  • 原: 学生将在考试中获得B或更好的成绩
  • 修改后: 80%的学生将在考试中获得75%或更高的分数

修订后的目标明确了表现水平,以及预期达到目标的学生人数.

结果只是简单地报告学生相对于项目设定的目标的表现. 目标实现状态(例如. 超过,满足,部分满足,不满足)也应注明.

使用以下提示作为指导:

  1. 结果是否报告了目标中描述的信息?
  2. 如果使用百分比或其他计算的最终计数, 创造最终结果所涉及的数字是什么? (e.g. 87/94=92.55%)
  3. Did the program clearly state achievement of the target (target status)?

说明绩效标准和人口百分比

  • 原: 学生将在考试中获得B或更好的成绩
  • 修改后: 80%的学生将在考试中获得75%或更高的分数

修订后的目标明确了表现水平,以及预期达到目标的学生人数.

用你的结果将目标转化为发现

  • 原: 70%
  • 修改后: 70%(70/100)的学生在与结果(方法)相关的指定测试问题上得分为75%或以上

结果应该与目标的格式相似(见上文)。. 在百分比中加入代表学生的人数,增加了数据的背景和价值.

Use the resulting information to underst和 和 improve student learning (Suskie, 2014).

这就是程序回答“那又怎样”的地方?”的问题. 这要求程序从结果中推断出意义,并提供额外的细节或背景,以便向外部读者充分解释结果. Various levels of analysis could be conducted to make sense of the information. 比较学习环境和分析结果以寻找趋势尤为重要. 对于教师来说,这是一个机会,可以根据项目的整体情况和影响学生学习成果的因素来理解结果.

使用以下提示作为指导:

  1. What are the strengths 和 weaknesses of student learning in this area?
  2. 对于有在线和面对面学位选择的课程:这些独特的学习环境的表现如何比较?
  3. 与往年相比,结果如何?
  4. How do the results fit into the larger l和scape of student learning in the program?
  5. 如何在项目内部分享结果?

对数据进行总结和反思

  • 原: 附测试题项分析.
  • 修改后: 根据试题项分析(附), 学生们成功地回答了方法论问题. However, they struggled to answer questions when graphs 和 tables were involved. 这些问题还需要精通数学. These results are up slightly from last year, but still below the program's target goal. 课程委员会将审查这些结果,并决定如何在高年级课程中改善这一结果.

这要求程序跟踪并描述完成的行动计划, 修改, 或者是程序的改进. 这是一个机会,让项目讲述自己的故事,并将学生的学习成果联系起来, 评估促使采取行动的结果, 以及所做的修改. The program should outline 和 determine the impact of their changes on student learning.

使用以下提示作为指导:

  1. 为什么要做这些改变? (e.g., the student learning outcome 和 the information that prompted action)
  2. What changes were made during the year or in previous years that impacted student learning?
  3. 这对学生的学习有什么影响?

用三个简单的步骤来写学习改进

  • 原: 结果比去年有所改善.
  • 修改后: 在过去三年中,与方法相关的分数低于既定的计划目标. Extra emphasis in this area was implemented across three key courses. Course assignments 和 rubrics were revised within the last two years. 结果,我们看到了方法论分数的提高.

写得好的改进包括三部分:1)对激励行动的数据/背景的概述, 2)对所采取行动的描述, 3)随后预期或报告的结果.

描述项目所采取的行动并考虑其影响

  • 原: 将创建补充材料.
  • 修改后: 在过去的几年里,这个项目的考试成绩有所下降. 今年举行了考试准备和辅导课. 我们今年的分数增长很小. 这是我们继续关注的问题. Additional interventions are planned (see our action plan to 创建 supplemental materials).

This statement describes actions taken - past tense - by the program. (将要发生的行动——将来时——是行动计划).

这就是程序回答“现在怎么办”的地方?”的问题. 项目应该解释他们分享和使用评估结果的过程,以在课程等领域做出决定, 教育学, 以及其他影响学习的方面. The strength of assessment is not that it provides quick fixes for a problem, 但它能促进活跃, 通知, 和 systematic improvement of a program through discussion among faculty. This is an opportunity to review student learning data 和 make decisions as a program.

使用以下提示作为指导:

  1. 关于学习质量的评估信息是如何共享的,并用于课程等领域的项目决策, 教育学, 以及其他影响学习的方面?
  2. 结果表明需要采取哪些行动?
  3. What concrete actions will the program take to sustain or improve this outcome? 这些行动的时间框架是什么?

概述任务,以提高学生的学习

  • 原: 教师 will meet to discuss the results of the assessment data 和 any necessary changes.
  • 修改后: 教师们开会讨论评估结果. 两名教师和一名研究生将开发补充材料,以改善学生表现的薄弱领域. 他们将在秋季学期完成这项工作,并在春季试用这些资源. They will share their feedback 和 materials with the faculty at the program retreat.

行动计划应该报告那些有意采取的行动. 讨论数据的计划不是足够的行动项目. 与您的程序一起审查结果,解释信息,并起草适当的行动计划.