良好评估和测量的基本概念

为了有效地执行上一页的评估优先级,了解一些关键概念是很重要的:有效性、可靠性、实用性和公平性。这些概念在整个评估过程中都很重要。下面的活动和例子将帮助你熟悉它们。

学习活动:

评估和测量中影响整个评估过程的四个概念是lpd应该熟悉的,即效度、信度、实用性和公平性。你能把每个术语与其定义相匹配吗?

评估的概念 定义
数据的准确性、无偏性、无误差和代表性的程度
评估本身和周围过程的质量;反映所有参与者是否被平等对待,结果是否被伦理地使用
考虑您是否拥有设计、管理、分析、使用和交流评估结果所需的人力、物理和上下文资源
从收集到的数据中作出准确推论的能力


为了使这些概念更具体,假设您想评估学生的写作水平,您将其定义为“用目标语言就熟悉的主题撰写非正式信息的能力”。为了评估学生的熟练程度,你给他们提供一个关于一个不熟悉的话题的正式信息的例子,让他们逐字抄写。请注意,为了完成这项评估,学生们不需要撰写信息,信息也不是非正式的或关于熟悉的主题。因此,你不能画画有效的推断你的学生的写作水平,正如你所定义的那样。

现在让我们假设你用一个更好的选择取代了评估:你的学生将在你的课程网站上写一个关于他们课程的讨论板帖子,一个关于熟悉话题的非正式消息。在您的第一节课上,您给学生15分钟的时间来起草、修改和发布他们的信息,并允许他们向您寻求帮助。第二节课,你的时间很紧,只给他们5分钟的时间。当你给他们的文章打分时,你会发现第二班的许多学生写的比第一班的少,甚至根本没有写,所以班级平均水平更低。可用时间的变化是评估过程条件的变化。这减少了可靠性因为学生的写作能力之外的因素影响了他们的分数。换句话说,分数的误差来源较多,因此评估的信度较低,这也会对效度产生负面影响。

而言,实用性,讨论区的帖子还不错。大多数教师都有时间和语言技能来完成这些短作业。讨论板是课程技术的一部分,所以不需要额外的资源。作业可以在以后的学期中重复使用,所以花在设计作业上的时间是一项有成效的投资。

转向公平,虽然作业对学生和老师来说需要的资源很少,但我们必须时刻牢记公平。例如,学生或老师可能没有设备或互联网接入,所以你的课程背景是决定公平性的基础。仔细考虑如何使用这些职位也很重要;学生很可能(也应该能够)认为他们的老师不会把他们的帖子分享给课堂以外的任何人。例如,在这种情况下使用他们的帖子可能会对学生产生负面影响,也会对公平产生负面影响。

这些概念中的每一个都对规划评估的设计和实施产生影响;在许多出版物中都提到了这些问题,例如雅雅德斯特和拉奎尔(2019)巴赫曼& Damböck (2018)Bannerjee (2016)戴维斯和麦凯(2018)诺里斯(2016),华莱士(2018)


CARLA邮件列表注册 接触卡拉 卡拉事件 捐赠给卡拉 卡拉在Facebook上 卡拉在YouTube上 推特
语言习得高级研究中心(CARLA)•140大学国际中心•331 - 17 Ave SE•明尼阿波利斯,MN 55414