classicality

来源: BlogBus 原始链接: http://www.blogbus.com:80/blogbus/blog/diary.php?diaryid=123729 存档链接: https://web.archive.org/web/20040607202801id_/http://www.blogbus.com:80/blogbus/blog/diary.php?diaryid=123729


classicality <<<终于好了 | 首页 | 我国教育评价发展的世纪回顾与未来展望>>> 元评价:对教育评价的评价 元评价:对教育评价的评价 按照一定的理论框架和价值标准对教育评价本身所进行的评价与研究称为元 评价。由于各种教育评价在具体实施中,往往存在着这样或那样的不甚得当之处, 不同程度地存在偏差和失误,影响着教育评价功能的发挥,这就要求我们对既定 的评价活动作必要的鉴定和监控,使它与评价的目的要求更加吻合,与目标更趋 一致。因此,应当加强对教育评价的评价,使之更加合理与完善。 一、元评价的内容与标准 元评价的内容与标准可在两个层面上加以概括,即对教育评价研究的评价和 对具体评价活动的评价。 (一)对教育评价研究的元评价的内容和要求 1.教育评价理论基础。教育评价作为一门科学,应具有坚实的理论基础, 理论依据应当科学、严谨。它应在马克思主义哲学指导下,运用辩证唯物主义观 点,理清教育的价值主体与客体及其尺度,以及评价的主体与客体及尺度,科学 地把握其内容、要求和关系。无论是制定方案、编制量表还是进行观察访谈和测 试,无论是对学生评价,还是对教师、学校的评价,都应有明确合理的科学依据 和法规依据。 2.教育评价理论框架体系。要求教育评价的原理原则明确合理,其理论框 架科学完备,理论正确适用、概括性强。 3.教育评价结构与功能。教育评价的结构应具有组织统一性,各部分之间 要协调一致,能够充分地发挥合乎各种情况和层次需求的功能。 4.教育评价方法体系。教育评价方法要科学、合理,要满足各个环节的需 要,方法体系要完善,使方案制定得科学可行,信息搜集准确可靠,信息处理方 便全面,符合方法的系统整体律、功能互补律和简便优化律。 5.监控机制。作为一个系统,教育评价应有良好的监控机制,能够较好地 控制、调节和自我完善,以实现系统目标。 (二)对教育评价活动的元评价的要求和标准 1、可靠性与准确性。一项评价活动的可靠性是用评价信度加以刻划的,它 反映了对评价的非系统误差控制的程度。信度高则说明评价的结果是稳定可靠的, 否则评价的一致性较差,可靠程度不高。信度可分为评价者信度、再测信度、复 本信度、和内部一致性等。评价的准确性或称为有效性则是用评价的效度加以刻 划的,它反映了对评价的系统误差的控制程度。效度高说明评价正确,较好地实 现了评价目的,否则评价的准确性差。评价效度包括评价的方案设计效度、评价 的实施效度和结论效度。其中方案设计效度由内容效度、结构效度组成;实施效 度由信息采集效度和信息处理效度组成;结论效度则包括结果合成效度和效标关 联效度。对评价的信度和效度的考察,即对评价的准确性与可靠性的具体要求主 要包括:①评价目的明确;②评价内容和标准的理论、法规和实践依据合理;③ 评价信息搜集和处理在方法、技术和工具方面是完善的;④多人评价或一人的多 次评价结果有较好的一致性,信度较高;⑤评价结果能准确有效地反映被评的实 际情况,有较高的效度。 2.适用性和可行性。具体要求是:①评价的各环节、步骤要求明确;②对 于既定的被评范围有较好的通用性;③评价标准要求明确,内容简练有较好的代 表性;④评价有较强的操作性、方法科学可行,便于评价者掌握,并易于被评者 理解接受;⑤评价具有节俭性,资金、人力、物力方面耗费低。 3.实效性与合理性。具体要求是:①评价由较好的正确导向作用,有利于 教育方针的贯彻和教育质量的提高;②实现评价目的,达到预先设计的要求,较 好地发挥评价功能;③评价结论正确并得到被评者认可,对被评的工作与学习有 明显的促进作用,产生良好的效果;④评价者有良好的职业道德和社会责任感, 注意保护被评者的合法权益。 对具体评价活动的元评价主要内容和标准是: 1.对评价方案的评价。①评价对象明确;②评价目的明了正确;③评价标 准合理,依据充分,表述清楚;如果是设计了指标体系进行评价,其指标体系的 结构和内容应体现评价的要求,界定清晰,权重分配恰当;④评价工作的计划周 密得当,安排合理;⑤选用的评价方法科学可行,评价信息的搜集、分析处理方 法得当,量表科学、可操作。 2.对评价组织实施的评价。①评价的组织机构健全,职责明确;②评价的 领导机构和成员对评价的组织领导得力,指导思想正确;③评价人员能履行职责, 协调一致,按照方案的要求,正确运用评价方法客观公正地实施评价;④评价符 合道德要求;⑤被评者对评价的认识正确、态度积极、主动配合,提供的资料完 备。 3.对评价结果和效用的评价。①评价结果可靠有效,通过对评价信息采集 和处理过程的分析,并结合必要的抽样复核认定评价有较高的信度和效度;②评 价结果的解释合理,结论恰当,被评者对评价结论认可接受;③评价功效发挥较 好,对被评者有促进作用;④评价有较好的实用性和适时性;⑤在时间和人力财 力上的投入合理,社会反响好。 二、元评价方法 从整体上看,元评价与一般的评价活动在方法上有许多共同之处。因此,教 育评价的各种方法均可移植于元评价。诸如,在信息搜集时的观察法、访谈法、 问卷法,信息处理中的集中趋势、相关程度、统计推断、以及综合评判的方法、 相对评价和绝对评价的方法,形成性评价与终结性评价的方法等等。当然,元评 价毕竟是一种特定的评价,有其自身的特点和适合于元评价的方法: (一)内容分析法 内容分析法是对评价中各种材料的内容及其有效性按照评价的目的和要求, 进行客观深入地研究、分析和评判的方法。对于教育评价研究的元评价来说,主 要用于教育评价的理论基础、框架结构和理论体系以及评价依据的元评价研究, 就具体评价活动而言,内容分析法则主要用于内容效度、结构效度等的分析和评 价。内容分析法要求客观科学、系统全面,并采用定性与定量相结合的方法进行 分析。在实施的过程中。每个步骤都要有具体要求,其步骤包括: 1.确定目的及研究对象。在元评价中进行内容分析首先应明确目的和对象, 教育评价的元评价内容分析的研究对象和目的主要有:①研究理论体系的合理性。 这是对教育评价的某一理论体系的研究与评价”包括某一流派、某种模式体系的 内容分析,主要评鉴该理论体系的合理性与完备性。②鉴定评价方案的科学性。 这是针对某一具体教育评价活动的评价方案所进行的内容分析,研究与评价该方 案的标准、依据、指标体系、信息搜集各环节特别是测验的内容等,评鉴其科学 性、代表性以及范围的合理性。 2.设计内容分析维度及标准。这应根据具体的研究对象和要求进行设计, 对一般的评价理论及评价模式而言,按其科学性、概括性、普遍性、可靠性和适 用性等加以分析。对具体的评价来说,内容分析应充分与该项评价的具体要求和 情况相一致,例如,对一项学业成就评价的内容分析,可以从知识维度和能力层 次维度编制具体的分析体系,可以借助双向细目表加以体现,并以此为依据进行 分析。内容维度体系中各维度的不同层次应当制定具体的可操作的标准。 3.搜集资料并归类。搜集资料应按设计要求和需要进行,既要全面、系统、 准确,又要富有代表性、典型性,不至于遗漏重要佐证或枉费时间和人力物力。 因此,选取样本要合理,并注意方法的科学性:各种搜集资料的方法如观察、访 谈、问卷、个案分析、查阅文献等法均可用于此处。 4.系统分析与评判。应注意以下几点:①严格按照设计的分析维度和标准 操作,力求客观公正标准统一。②认真作好记录,对评判结果的记录应有利于统 计处理,可以设计相应的量表,用数字加以描述。③设计记录表,将分析评判的 结果填于表中,以便统计分析。 5.对结果的处理与分析。在结果的处理上,既要注意通过资料的分析汇总 进行定性描述,又应对一些数据资料作定量的分析与综合,此时可以运用有关统 计方法进行分析,如分析集中趋势、差异程度、相关及进行假设检验等。 对于教育评价理论体系、方法体系及评价模式的元评价,可作一些横断分析 或时间序列的纵向分析,也可作不同体系与模式的比较研究,以分析其发展现状 和趋势。概括地说有:①分析同一体系或模式的不同时期的变化及特点,作趋势 分析与研究。②同一时期的不同体系与模式的现状分析与研究。③按时间体系、 模式的维度变化所得的不同组合的比较研究。 (二)经验总结法 经验是指人们的经历和体验。在哲学上通常指感性认识。经验总结是根据既 定的活动目的,按照一定的价值标准,对实践中的经验事实,在分析研究的基础 上作出肯定或否定的决断,并通过思维加工,使之上升为理性认识,揭示客观规 律的活动。经验总结对探寻事物间的因果关系,对于揭示客观规律,使人们的行 动更合乎规律,以求少走弯路更好地实现预期目的,具有重要意义。因此,应当 注重经验总结在元评价中的应用。 经验总结用于教育评价的元评价应注意其科学性:一是经验型思维水平,二 是理论思维水平。为了提高经验总结的科学性和适用性应当注意:①要有正确的 指导思想。即在元评价中对评价活动进行经验总结,必须以正确思想为指导,要 有正确的教育思想,有正确的教育价值观、人生观和评价观,否则,将黑白颠倒、 是非不清。②必须以经验事实为基础,实事求是,不可凭主观臆造,不能随意变 形或拔高,应客观地反映经验事实本身固有的性质和规律。③在教育评价中要经 常地、自觉地进行经验总结,克服盲目性和随意性。④既注重正面经验的总结, 也要注重反面经验的总结,作全面分析与概括。⑤要有科学的方法。 在教育评价中通过经验总结进行元评价,其过程可分三步。首先,对教育评 价的经验事实进行搜集、整理,并作适当的筛选,准确选出富有代表性的事实。 第二步,通过对照、比较和分类等方法,进行初步的分析、综合、抽象和概括, 对评价事实和关系作一定的归纳,形成经验型概念。注意定量与定性分析的结合, 参照一定的标准,对具体的评价事项进行肯定与否定,使正面经验得到发扬,不 足得到改进。第三步,在以上两步的基础上,作深入地分析和抽象,通过判断和 推理等,抽象出本质和规律,深化对评价的认识,概括出新的评价模式。 (三)评价信度分析 1.评分者信度。进行教育评价,主评对被评者成绩的评判的稳定可靠程度, 对整个评价的可靠性具有重要作用。评鉴主评的评分信度主要有相关分析法、肯 特尔和谐系数分析法以及由概化理论提供的方法。 2.内部一致性。教育评价指标体系的各指标间或一项测验的各项目间如果 有较高的正相关,那么这个指标体系或这项测验就具有较好的内部一致性,并称 为是同质的。内部一致性越高,项目越同质,它的分数的意义越明确。在综合评 价中,其指标体系和测验试题往往包括了不同性质的评价内容,这时虽然从整体 上看内部一致性可能不太高,但对于各部分的内部应当有较高的一致性。分析内 部一致性的方法有多种,如分半法、库德――理查逊公式以及克朗巴赫系数等。 3.稳定性和等值性。对评价的稳定性和等值性的考查是通过计算相关系数 进行的,前者是计算对同一群体用同样的项目在不同的时间进行的评价所得的结 果间的相关系数,目的是检查评价是否稳定一致;后者则是出于同一评价目的和 要求,但采取不同的评价方案对同一群体实施评价所得的两组结果,通过相关分 析,研究和评判两种方案的异同,如果有资料说明其中的一个是高质量的,那么 可以据此推断另一个方案的质量高低。 (四)评价效度分析 1.因素分析。因素分析方法是通过对相关矩阵的分析,从众多的交互相关 中概括和推论出起决定作用的基本因素。在元评价中,利用因素分析可以对内容 效度和结构效度等分析得更准确,使方案的修改更加完善。需要注意的是,在元 评价中,因素分析往往是检验性的,因此在得到相关矩阵之后,更多的应采取分 组法抽取因素,计算因素与变量的负荷矩阵,验证原来方案设计是否合理。 2.对效标关联效度的评鉴。效标关联效度是以评价结果与效标之间的相关 程度表示的效度。它所关注的是评价的结果与特定标准之间关系密切的程度,强 调的是效标行为,以及对这些行为预测得如何。对效标关联效度的评价是以某些 事实为依据的,其有效性是通达经验性的取证加以印证的,而且常常借助实验和 统计的方法,主要有相关法、预期表法以及假设检验等。 classicality 发表于 2004-03-30 21:48 引用(Trackback0) 行动研究法作业,初 行动研究法作业 文献综述的写作 网络课程网址(1) 教育信息化的概念与特征 长春一中学尝试取消班主任 各班成立执行班委会(转) 推荐----今天谁有权评价教师 教育评价与学校的科学管理 英国的发展性教师评价制度 教师评价 ※我※ classicality@blogcn 学习的blog※classicality@etc 十月七日::古典音乐的角落 ET朝阳星火-学习、研究教育技术 life growing 【刻录事•Klogs_Blog】 柔韧的原乡 xiuli'Blog of Online-edu Learning, Thinking & Researching 东行记 jiahou's blog 流动的日记 梦想与幻想之岛 ※课程学习※ 教育信息处理 教育测量与教学评价(课程教与学) 教育技术研究方法