高指标的权重可以引导教育工作者重视某项工作。不同的权重分配往往导致不同的评价结果。权重的数字表示形式有小数、百分数、整数。小数的权重之和为1,各评价指标的权重为1和0之间的一个小数。百分数的权重之和为100%,各评价指标的权重为0到100%之间的一个百分数。研究生德育绩效评价指标体系的三级结构形式可用图表6-2表示。(图略)
指标体系是实现评价目标的重要手段,是进行教育评价的前提和依据,它同时提供了进行价值判断的统一尺度。因此,评价指标体系在现代教育评价中占有核心的地位,起着举足轻重的作用。研究生德育绩效评价应首先从研究和建立评价指标体系人手,这是一项关键性的工作,评价的其他工作要在指标体系建立之后才能进行。可见,建立评价指标体系是非常重要的。科学可行的评价指标体系的建立,是切实有效地开展研究生德育绩效评价的基础工程和核心环节。
2.建立研究生德育绩效评价指标体系的要求
建立研究生德育绩效评价指标体系,务必遵循如下要求:
必须符合党和国家对研究生德育工作的基本要求;它必须符合研究生思想品德形成和发展的规律;它必须符合学校的实际。研究生德育绩效评价指标体系的构建,要符合研究生德育工作的本质特征和目标任务,必须坚持正确的导向。即评价指标体系要体现社会主义办学方向。同时注意克服和防止那些带有普遍性的不良倾向。
◆德育绩效评价指标体系的设置要体现德育绩效的表现形态
前面讲了德育绩效的表现形态有三个方面:直接和间接;现实和潜在(当前和长远);个体和全体并存,这些形态概括为一点就是二重性特点。这启示我们在设置评价指标体系的时候要兼顾两个方面。如当前绩效和长远绩效并存这一形态,规定了我们在设置评价指标时既要考虑当前绩效——人的思想明显地发生了变化,立即引起的物质性、经济效益的提高;也要考虑长期绩效一—人生观、世界观、价值观等方面的变化;企业文化、校园文化、大学精神的形成等。忽视任何一方,都会引起不良结果。
◆德育绩效评价指标体系的设置要做到定量和定性相结合
评价目标是通过指标体系中各条指标对客体(评价对象)的实测来实现的。这就要求设计指标时,要注意可操作性、可评定性,务必做到定量和定性相结合。评价指标体系作为一个系统,应保持自身的整体性。对研究生德育绩效评价指标的权重分配要体现出整体性,力求构建的指标体系既突出重点,又兼顾其他。在研究生德育绩效评价中为了能够把握住影响目标的主要因素,有意识地忽略一些虽有影响但属次要的因素,这是允许的,但在任何时候都不能舍弃那些反映评价对象实质的指标,因为这些指标能够深刻地、系统地评价出实际的水平。
◆德育绩效评价指标体系的设置要界定明确
评价指标体系中的每项指标的界定应该清晰明确,指标选项间可以存在一定的包含关系和重叠关系。但不能完全相同或重复。其原因在于:一是为了简化指标,因为若出现两条以上的指标反映同一事物,无疑将增加指标的数目,增加评价的工作量,降低评价的可行性;二是为了保证评价的科学性,因为出现两条指标反映同一事物,无疑将提高该事物在评价中的地位,这是人为的偏差,必将影响评价的科学性。
◆德育绩效评价指标价体系的设置要符合客观要求
我们建立的指标体系应该客观可信、符合实际,这样才能较确切地反映出评价的真实水平。指标体系的设计应忠实于评价目标,不仅指标体系要体现目标的整体,而且每一条指标都应当保持与目标的一致性。而且,这样的评价指标体系应该是可被接受的,即一是要简易,使进行评价的实测者易于实施;二是要可行。即指标所要求提供的信息可实地取得,并具有实际意义。建立的指标体系是否简易可行,是否在人力、物力、时间和信息的提供上被人们所接受,这些都是不容忽视的问题。因此,简化评价指标体系也是评价指标体系设计中一个关键环节。
◆德育绩效评价指标体系的设置要符合科学发展观的要求
科学发展观是“以人为本、全面、协调、可持续发展”的理念。研究生德育评价指标体系的设置必须符合科学发展观的要求。首先,以人为本。注重人的主体的解放,具有人道主义的情怀。其次,要符合人的全面发展要求。要体现对人的全面素质的衡量,不仅应该从校内活动中去衡量,还需要从校外实践活动中去衡量。第三,要符合可持续发展要求。要从发展的眼光去评价学生。不仅看当前,更要看长远,看发展趋势;不仅要看目前的外在表现,更要看潜在的发展能力。德育绩效评价的内容、方式、手段需要在探索中得到开拓创新,做到与时俱进。这样才能保持德育评价体系的可持续发展,达到其可持续发展的要求。
总之,德育绩效评价指标体系是搞好研究生德育绩效评价的核心,是我们进行研究生德育绩效评价的基本依据。我们在建立评价指标体系时必须遵循上述依据。从这些依据出发,我们才有可能逐步提高指标体系的品质,提高评价工作的质量。
3.建立研究生德育绩效评价指标体系的环节
确定绩效评价指标体系,一般可以分为以下几个步骤:
◆确定依据
认真制定评价体系,是抓好对研究生德育工作评价的基础。制订评价体系首先要有充分的依据。研究生德育绩效评价指标体系的建立不是评价者主观臆断的产物,而应是客观规律的主观反映。必须依据研究生德育目标的要求为依据,以研究生思想政治品德变化发展的规律为准绳作出价值判断。所以,在评价过程中,研究生德育目标是确定评价指标的最重要的依据,体现了党和国家的根本要求。当前,《中共中央国务院关于加强和改进大学生思想政治教育的意见》(2004.年16号文件)、《中共中央关于加强和改进思想政治工作的若干意见》和教育部《关于加强和改进研究生德育工作的若干意见》(2000年3号文件)等文件是指导各培养单位做好研究生德育工作的主要文件,制定研究生德育工作评价体系,应以这些文件精神作为主要依据。教育部2000年3号文件强调:“认真贯彻执行中央《关于加强和改进思想政治工作的若干意见》精神,研究生教育应把思想政治、品德教育和学风建设放到突出位置上。培养研究生树立正确的人生观、世界观、价值观,强烈的爱国主义精神和高度的社会责任感,无私奉献和艰苦奋斗的精神;养成求实、严谨、科学的作风。”这便对研究生德育的素质提出了明确的要求。中共中央国务院关于加强和改进大学生思想政治教育的意见》(2004年16号文件),从宏观上明确了大学生(包括研究生)思想品德培养规格,这给我们构建科学的研究生德育评价指标体系提供了直接的政策依据。此外,辩证唯物主义原理为构建科学的研究生德育评价指标体系提供了理论基础;系统论中的整体思想和动态观念为研究生德育评价指标体系的构建提供了方法论。
◆选定绩效评价指标体系
如何选定绩效评价指标体系一向是德育评价者比较棘手的问题。根据国外比较成功的经验,结合我国的实际,我们以研究生德育工作者评价为例,提出了如下的指标体系:业绩评价类指标,主要包括工作质量与工作量。技能类指标,主要包括基本能力(业务知识、文化水平、岗位经验等)、思考能力(理解力、判断力、想像力等)、交往能力(表达能力、对他人的影响程度等)。态度类指标,主要包括纪律性、协作性、积极性和责任心等方面。
◆确定绩效评价指标权重
确定完整、合理的绩效评价指标是绩效评价的重要前提,但真正的难点是确定每个指标的权重。对于如何确定评价指标的权重,国内外学者已进行了很多研究,目前应用比较多的一是经验型的,如特尔斐法(DelphiModel)、层次分析法(AnalyticHierarchyProcess,简称AHP),和主观经验法这三种方法。相对而言,第一种方法比较简单,操作性强,但精度不够;第二种方法科学性更强,但施行起来有一定难度,一般需要专家的支持;第三种方法比较大众化。下面就这三种方法一一介绍:
特尔斐法(DelphiModel)特尔斐法是请若干本领域的专家,以发问题表的形式,征求、汇集和统计个人的意见或判断,以便在一些问题上使大家取得一致的意见。这种方法的优点是可以避免权威、职务、职称、社会能力以及人数优势对确定权重的干扰,有利于集中大多数人的正确意见。这种方法具体的咨询方法很多,针对思想政治教育评价,本文认为一般的做法分为以下几步:第一步,设计指标体系咨询表格;第二步,聘请专家,第三步;寄发咨询表格,并按时收回。这一步可以多次循环,直到专家意见基本统一,需要注意的是,每次循环需要将所有专家的反馈意见不署名地寄发给每一位专家作为参考意见。例如用特尔裴法确定人才德育质量各指标的权数的专家咨询表如下:
在运用上述表格时,必须注明政治素质、理论素质等包含的具体内容,并注明很重要、重要、一般、不重要的定义。以免专家对这些问题理解上的差异而影响咨询的科学性。
层次分析法层次分析法是由美国学者T.L斯塔(T.L.Saaty)首先引入教育评价领域以解决权重系数的确定问题的。它实际上是一种多目标多标准的决策方法。运用层次分析法时,首先要把复杂的评价目标分解为多级指标,在同一层次上根据T.L.区斯塔的相对重要性等级表,列出两两比较矩阵,按照确定的数学公式计算每项指标的相对优先权重。
层次分析法把专家的经验认识与理性的分析结合起来,大大降低了两两比较中的不确定因素的影响程度,是比较理想的权重确定方法。但是对于研究生德育绩效评价来说它却比特尔斐法法更加复杂,且增加了研究生德育绩效评价的成本与周期,因此略显不便。
主观经验法主观经验法是指,在评价人员对某一评价客体非常熟悉而有把握时,可以直接采用主观经验来确定权重系数。但要注意以下几个方面:
权重分配的合理性。即权重分配要反映评价客体的内部结构和规律。防止因权重分配不当而脱离实际或产生偏向。
权重选择的变通性。即权重分配要符合客观实际的需要.可以根据评价目的与具体要求而适当变通分配。
权重数值的模糊性。即对权重的分配不必十分精确,过度要求精确只会导致机械生硬的赋值。
本研究评价指标体系的权重设计的路径是:首先通过召开研究生、教师,特别是研究生工作系统的教师座谈会,根据研究生德育目标的要求和我们研究生德育工作的经验,结合国内外一些模式,特别是特尔斐模式、陆氏模式等,拟出指标体系设计的设想。然后进行咨询,即把初步拟就的指标体系广泛征求专家和研究生德育工作者的意见,要求他们对指标条目和体系的科学性、合理性和可行性以及仟指标的权重和量化方法进行广泛的研究,提出增删修改的意见。此种咨询可以是一次,也可以在调整后内进行第二次咨询,以求尽可能地提高评价质量。汇集咨询意见后。重新研究指标体系及其权重。并进行相应的修改和调整,正式确立评价指标体系及其权重。
◆设立指标等级
指标等级是对评价客体进行评价的衡量尺度,是用于检测评价客体对要求达到的程度。在选择和运用指标等级时,既要严格掌握标准,又要从实际出发,不可要求太高太严以免挫伤评价者的积极性,也不可降低标准而使评价流于形式。确定指标等级要根据需要确定,最常用的是五级制测评,使用优秀、良好、中、合格、不合格。但我认为,介于“良好”和“合格”之间的“中”不易测评,故本研究应用了四级制测评,使用优秀(5分)、良好(4分)、合格(3分)、不合格(O~2分)等四个等级。评价者只需对所选项打“√”即可。
当然,在确定指标体系、权重、指标等级后,还必须进行测试论证,以便对确定的评价方案进行修整完善。