小学教师科研能力评价指标体系研究
小学教师科研能力评价指标体系研究
摘 要 本文主要研究内容是运用层次分析法(AHP)理论以问卷形式对部分小学教师的科研 能力进行问卷调查,运用 AHP 统计软件对结果进行统计,根据统计结果对当前评价小学教师的科研 能力水平的指标及其体系进行研究和设计,目的是能在一定程度上改进和完善这一体系,改善目前 小学教师科研活动中存在的问题,增进小学教师对科学研究的认识,使小学教师科学研究更加标准 化、科学化。在检阅自己大学学习成果的同时为我国的教育科研提供一些数据。 关键字 科研能力 评价指标 层次分析法(AHP)
1、定义的界定
1.1 定义的界定 科学一词,缘于拉丁文的 scio, 英文为 science,其本意是“知识”、“学问”。 《辞海》 对“科学”的解释为:科学是运用范畴、定理、定律等思维形式反映现实世界各种现象的本质和规 律的知识体系,是社会意识形态之一。 科学还有另外一个形容词性的解释: 合乎科学的。 研究同科学一样,在字典上有两个定义,一为探求事物的性质、规律等的活动,另外一个是考 虑、商讨的意思,为动词词性。小学教师科学研究能力中的研究的含义更加趋向于第一种。 能力,是指掌握和运用知识技能的条件并决定活动效率的一种个性心理特征。凡是为某项专门 活动所必需的能力,称之为特殊能力,如绘画能力、音乐能力、写作能力、体育能力等。 1.2 教育评价指标体系 教育评价指标体系是由各层教育评价指标按照一定逻辑关系结合而成的指标系统、相应的权重 系统和评价标准系统共同构成的。
2、问题的提出
2.1 当前我国教育评价发展的概况 现代教育评价新理念提出,教育评价可分为形成性评价和终结性评价。现代教育评价侧重于教 育过程的变革,特别强调形成性评价,即在教育过程中对学生知识掌握和能力发展的及时评价。 但是, 长期以来,我国的教育评价却仍处于低水平状态,重“评定”而轻“评价”,或者只有“评定”而无“评 价”,实际上是一种重结果而轻过程的价值取向。它不利于促进教育的发展。世纪之交,教育部《全 日制义务教育语文课程标准(实验稿)》提出了教育评价新理念:“形成性评价和终结性评价都是必要 的,但应加强形成性评价。 ”教育部颁布的高中新大纲也指出“教学过程和教学效果”并重。这一新 提法昭示着我国教育评价理念的重大突破和随之带来的教学内容和方法的重大改革。 2.2 教育评价的作用 1、指挥导向作用。2、目标调节作用。3、分等督学作用。4、问题诊断作用。5、经验交流作用。 6、咨询决策作用。 2.3 当前我国小学教育科研工作中存在
的问题 当前我国小学教育科研工作中主要存在以下几个方面的问题: 一是进行科研工作的目的不正确。小学教育科研的根本目的是通过研究,揭示小学教育教学过 程中规律性问题,为小学教育的改革与发展提供科学的理论依据和行动策略,不断提高学校教育质 量。但是,在目前的实际工作中,不少小学教师搞科研的目的不在于学术研究,他们的目的在于通 过这一项工作来满足个人的一些需求,例如评定职称、晋职、评先进或者其他利益的满足。 二是课题选择的不科学。当前小学教育科研工作中选题方面主要存在两方面问题:其一是选题 类型不当;其二是选题缺乏论证。从实际需要来看,小学教师的科研工作应主要围绕着应用和开发 进行,而不是理论研究。主要原因在于理论研究的周期相对长一些,并且要求研究者有较高的理论 素养,而对于小学教师来讲,周期过长的研究很显然并不适合他们。但是由于理论研究涉及到的研
究方法较少,易出成果,很多教师比较偏向于理论研究,这就使得科研成果理论深度不够,同时又 不具备很强的实际意义,流于表面化。在选题过程中,需要从重要性、紧迫性、创新性、科学性与 可行性等几个方面,对拟选择的课题进行论证。经过论证,确定该选题具有理论价值、实用价值后, 才能将它确定为研究课题,以避免盲目性,但是目前很大部分教师在选题的时候并不是进行严格的 论证,而是根据当前主流社会关注的内容进行研究。 三是研究过程的随意性。这种随意性主要表现在不制定具体的研究计划,研究过程凌乱,不成 体系,导致研究的前期、中期和后期不连贯,缺乏系统性,研究资料散乱不完整,给研究结果的呈 现带来很大的麻烦,影响成果的科学性。 四是研究成果的表面性。前期研究过程的随意性必然导致各项工作的时间安排缺乏合理性,对 课题所涉及的各个方面不能进行深入的研究,所积累的研究资料并不具备很强的理论性,其研究成 果必然不能对所研究的课题进行深刻的阐述。 2.4 问题的提出 通过以上分析可以得到以下结论:当前小学教育科研工作中出现的问题是多方面的,渗入到研 究的各个环节中,小学教师的科研素质亟待提高,而作者发现目前教育界还缺乏一个能够准确的评 判教师科研能力的评价指标系统,因此,需要设计一个适用于小学教师的能对教师科研能力做出准 确测量提供可靠而有效的数据的评价指标体系。
3、AHP 理论简介
3.1 AHP 理论的发展 AHP 理论是匹兹堡大学教授 Thomas L. Saaty 于 1970 年提出的,它的主要理论基础是线性代数 和图论,通过绘图的方式分析
问题,揭示问题的层次,并引入线性代数中矩阵的概念计算出各个选 择方案的权重。AHP 可以帮助决策者撇清问题的始末和层层分析问题,并借由求得可供选择的各个 方案的相对重要性(即其权重) ,供决策者作为参考。 AHP 从 70 年代发展至今已日趋成熟,除原先是用在国防问题的决策分析外,其应用的领域已经 扩展到文化资源、环境评估和教育领域中。目前 AHP 主要被用以解决以下十三类问题:1.决定优先 次序;2.产生交替方案;3.选择最佳方案;4.决定需求;5.分配资源;6.预测结果;7.衡量绩效; 8.系统设计;9.确保系统稳定;10.最佳化;11.规划;12.解决冲突;13.评估风险。 3.2 AHP 理论的分析程序 Zavbi & Duhovnik 提出 AHP 的研究方法主要有四个步骤:建立阶层、因素间的成对比较、选择 方案的成对比较和决定各选择方案的整体优先值。将因素间的成对比较与选择方案的成对比较进行 综合后即可得出 AHP 理论的研究主要分三个阶段。 3.2.1 建立阶层 建立阶层的时候必须有足够的相关因素,为避免过于主观,在建立阶层时可采用头脑风暴法、 层次结构分析法等方法构建可能存在的因素。AHP 是借由因素层级结构将复杂的问题简单化,以利 于决策者系统化的了解问题的实质,它简单的层级划分方式是将问题或者系统化分为三个层级:最 高层为目标层,这一层中只有一个元素,是分析这个问题所要达到的最终目标;中间层为准则层, 这一层有多个元素,它表示采用某种措施或政策为实现最终目标所涉及的中间环节;最底层为方案 层,它包含了为实现最终目标的各种措施或决策方案。整个层级是由上往下发展的,第一层的各个 判断准则具有独立性,而依照各个准则比较其下一层不同的选择方案,其中进行分析的程序有两种, 一个是以目前实际情况来定的政策或实施步骤,另一个是回馈性的计划程序,根据既定的目标来规 划所应有的政策或实施的步骤。 3.2.2 成对比较及计算权重 本阶段主要是通过对各层级合格因素间的成对比较,计算出它们的相对权重。 3.2.2.1 AHP 的评估尺度 在进行各种因素间的两两比较时,AHP 所使用的基本评估制度是由文字叙述评比而得出的。下
2
表为 AHP 的评估尺度及其具体含义:
表1 标 度 1 3 5 7 9 2、4、6、8 表示两个因素相比,具有同样的重要性 表示两个因素相比,一个因素比另一个因素稍微重要 表示两个因素相比,一个因素比另一个因素明显重要 表示两个因素相比,一个因素比另一个因素强烈重要 表示两个因素相比,一个因素比另一个因素极端重要 为上述相邻判断的中值 AHP 的评估尺度及其具体含义 含 义
3.2.2
.2 计算各级因素间的权重 在计算因素的权重时主要包括如下三个步骤: a. 建立成对比矩阵,通过评估尺度进行各因素间的成对比较,然后在某一因素下进行各选择方 案的成对比较,以得出成对比矩阵。 b. 计算特征值和特征向量。 c. 一致性检验。 d. 计算整体权重。 e. 敏感度分析, 包括动态敏感度分析、 整体结果之间表现敏感度分析、 坡度升降率敏感度分析。 3.3 评价指标体系设计的原则 3.3.1 科学性原则 设计评价指标体系时,首先要有科学的理论作指导。使评价指标体系能够在基本概念和逻辑结 构上严谨、合理,抓住评价对象的实质,并具有针对性。同时,评价指标体系是理论与实际相结合 的产物,无论采用什么样的定性、定量方法,还是建立什么样的模型,都必须是客观的抽象描述, 抓住最重要的、最本质的和最有代表性的东西。对客观实际抽象描述得越清楚、越简练、越符合实 际,科学性就越强。 3.3.2 系统优化原则 评价对象必须用若干指标进行衡量,这些指标是互相联系和互相制约的。有的指标之间有横向 联系,反映不同侧面的相互制约关系;有的指标之间有纵向关系,反映不同层次之间的包含关系。 同时,同层次指标之间尽可能的界限分明,避免相互有内在联系的若干组、若干层次的指标体系, 体现出很强的系统性。 3.3.3 通用可比原则 通用可比性指的是不同时期以及不同对象间的比较,即纵向比较和横向比较。 纵向比较。即同一对象这个时期与另一个时期作比。评价指标体系要有通用可比性,条件是指 标体系和各项指标、各种参数的内涵和外延保持稳定,用以计算各指标相对值的各个参照值(标准 值)不变。 横向比较。既不同对象之间的比较,找出共同点,按共同点设计评价指标体系。对于各种具体 情况,采取调整权重的办法,综合评价各对象的状况再加以比较。对于相同性质的部门或个体,往 往很容易取得可比较的指标。 3.3.4 实用性原则 实用性原则指的是实用性、可行性和可操作性。 3.3.5 目标导向原则 评价的目的不是单纯评出名次及优劣的程度,更重要的是引导和鼓励被评价对象向正确的方向 和目标发展。如果一个评价指标的设计不以被评价者的发展为根本出发点,是没有任何意义的。
4、小学教师科研能力评价指标体系设计过程
4.1 准备阶段
3
研读了大量的资料,综合目前这一领域的各种研究成果,初步构建研究的整体框架,主要的工 作内容包括:1、理论资料的累积;2、研究方法的选择,通过对具体情况的分析,决定采用问卷调 查法,在设计指标体系时采用层次分析法。3、根据具体情况,设计
具体的研究计划。 通过对所评价的小学教师科研能力进行分析,初步将评价指标细化为五个二级指标,每个二级 指标又分别细化为 N 个三级指标,见表 2。
表2 一级指标 二级指标 小学教师科研能力评价指标 三级指标 对科研工作的认识(B1a) 获取信息的能力(B1b) 选题能力(B1) 查阅资料的能力(B1c) 发现问题的能力(B1d) 表述课题的能力(B1e) 对科研理论的了解(B2a) 小学教师科研能力 设计方案的能力(B2) 对科研方法的了解(B2b) 根据现实情况设计研究方案的能力(B2c) 实验操作能力(B3) 对具体研究手段的了解 (B3a) 运用各种调查方法的能力 (B3b) 掌握基本的统计学知识 (B4a) 运用图表等方式表述研究结果 (B4b) 了解论文获报告撰写的一般过程(B5a) 语言表达能力(B5b)
整理、分析能力(B4)
科研成果表述的能力(B5)
表中括号内的字母分别代表因素所属的层级,数字代表该因素在该层级中是第几个因素,例如: 选题能力(B1) 表示第二层,1 表示第一个因素;对科研工作的认识(B1a) ,B ,B1 表示该因素是在 因素 B1 的基础上细分出来的一个分支因素,小写字母 a 表示该因素是所有 B1 因素的分支因素中的 第 a 个。 指标的具体设计是按照科研的一般过程来设计的。一项科研工作从开始到最后一般分为选题阶 段、方案设计阶段、实验操作阶段、整理分析阶段、科研结果表述的阶段。选题阶段又可以分成收 集信息、分析信息、发现问题、确定研究内容、确定题目等几个阶段;方案设计阶段是根据研究课 题和自己具备的实际情况,选择恰当的研究方式和研究工具,合理安排时间,做出工作计划;实验 操作阶段是对前一阶段制定出的研究计划加以实施,对各种研究方法的运用能力有着很高的要求, 这一阶段对科研成果的信度和效度有很大影响;整理分析阶段则是对实验操作阶段收集到的各种信 息作处理,将杂乱的信息转化为有效的科学数据并加以分析;科研结果呈现这一阶段主要是对语言 表达能力有要求。以上的论述是在进行本课题的资料收集和整理的过程中得到的经验,经过与他人 交流,同时阅读大量教育科研资料之后总结出的结论。 设计思路:按照进行科研工作的一般流程,以时间顺序为主轴,明确研究工作各阶段所需要进 行的具体工作内容,推理出所需考察的具体因素,运用逐级分解的思维方式将其细化,得到三级指 标。 下面 14 个三级指标是按照上面论述的一系列对教育科研过程的理解进行设计的。 (B1a)对科研工作的认识:正确理解小学教师开展科学研究工作的实际目的是为小学教育的改 革与发展提供科学
的理论依据和行动策略,不断提高学校教育质量。设置这个指标源于无意间在网 上看到的一篇文章,大意为现在小学教师搞科研质量不高,是因为政策的影响,目的是为了评职称 等等,只有目的正确才能搞出高质量的科研成果。因此,在指标中加入这一项,以作考察。 (B1b)获取信息的能力:通过电视、书刊杂志、报纸、网络等媒体获取学术上的最新动态的能 力。 (B1c)查阅资料的能力:通过查阅各种书籍和各种网络资料库获得自己所需要的学术资料和数 据的能力。
4
(B1d)发现问题的能力:从各种媒体和日常生活中,通过观察和了解,发现目前小学教育领域 内存在的问题或研究尚不充分的课题的能力。 (B1e)表述课题的能力:确定研究方向后,能用最简洁的语言表述出研究内容,即确定科研论 文(或报告)题目的能力。 (B2a)对科研理论的了解:即对所涉及到的学科基础理论和科学研究基本方法(包括统计学方 法)的了解。 (B2b)对科研方法的了解:会运用各种实际操作方法进行调查研究。 (B2c) 根据现实情况设计研究方案的能力:分析现有条件,从实际出发,制定出一套最合理的 研究计划,包括研究的时间、手段等。 (B3a) 对具体研究手段的了解:了解实验法、问卷法、观察法、访谈法、文献法等研究方法的 具体内容,并且知道在何种情况下运用何种方法能达到最理想效果。 (B3b) 运用各种调查方法的能力:会正确的操作各种研究方法,合理安排进度,科学取样,最 大程度上避免误差的产生。 (B4a) 掌握基本的统计学知识:在取得原始数据后,会进行初步的数理统计,会运用各种统计 学软件进行分析。 (B4b) 运用图表等方式表述研究结果:论文撰写的过程中,会运用文字以外的统计图、统计表 等方式表述较为抽象的数据,使研究结果简明易懂。 (B5a)了解论文或报告撰写的一般过程:知道论文的一般格式,能够写出一篇合乎标准的科研 论文或报告。 (B5b)语言表达能力:会合理的组织语言,使文章在具备科学性和专业性的基础上尽量做到简 明易懂,不刻意堆砌专业性很强的专有名词。 4.2 问卷调查阶段 这一阶段主要是进行基础数据的积累。采用问卷法,对河北省张家口市 10 所小学的 130 名小学 教师进行调查,共发放问卷 130 份,回收 116 份,其中有效问卷 112 份。 4.3 统计分析阶段 回收问卷得到以下统计结果见表 3——表 8。
表3 问题 1 2 3 4 5 6 7 8 9 标度 3 4 2 5 4 2 5 1/2 2 表4 问题 1 2 3 4 5 6 标度 1/2 1 1/3 1 1/2 1/2 5 二级指标重要性统计结果 选择人数 45 53 42 55 48 42 67 55 37 针对二级指标 B1 下的三级指标的重要性统计结果 选择
人数 43 58 44 60 39 40 占总人数百分比(%) 38.39 51.78 39.28 53.57 34.82 35.71 占总人数百分比(%) 40.17 47.32 37.5 49.10 42.85 37.5 59.82 49.10 33.03
7 8 9 10
2 1/3 3 3 表5
50 58 57 45 针对二级指标 B2 下的三级指标的重要性统计结果 选择人数 48 45 32 针对二级指标 B3 下的三级指标的重要性统计结果 选择人数 45 针对二级指标 B4 下的三级指标的重要性统计结果 选择人数 61 针对二级指标 B5 下的三级指标的重要性统计结果 选择人数 32
44.64 51.78 50.89 40.17
问题 1 2 3
标度 3 3 2 表6
占总人数百分比(%) 42.85 40.17 28.57
问题 1
标度 7 表7
占总人数百分比(%) 40.17
问题 1
标度 5 表8
占总人数百分比(%) 54.46
问题 1
标度 3
占总人数百分比(%) 28.57
该结果显示了被调查对象对所有十四个三级指标的重要性做出的判断,表格中标度一栏中的选 项为被选中次数最多的选项,其他选项的选择情况请参照附录一。 4.3.1 两两对比矩阵的建立 根据回收的问卷可建立判断矩阵 1、2、3、4、5、6,即表 9—14。其中矩阵 1(表 9)为二级因 素的两两对比矩阵,矩阵 2、3、4、5、6(表 10-14)为各个二级因素下的三级因素的两两对比矩阵, 见表 9——表 14。
表9 比 因 素 值 因 素 选题能力(B1) 1 1/3 二级指标的两两对比矩阵 实验操作能力 (B3) 4 4 整理、分析 能力(B4) 2 2 科研成果表述的能 力(B5) 5 5 设计方案的能力 (B2) 3 1
选题能力(B1) 设计方案的能力 (B2) 实验操作能力 (B3) 整理、分析能力 (B4) 科研成果表述的 能力(B5)
1/4
1/4
1
1/2
2
1/2
1/2
2
1
5
1/5 表 10
1/5
1/2
1/5
1
指标 B1 下三级指标的两两对比矩阵 查阅资料的能力 (B1c) 1 发现问题的能 力(B1d) 1/3 表述课题的能力 (B1e) 1
比 因 素
因 值 素
对科研工作的认 识(B1a) 1
获取信息的能力 (B1b) 1/2
对科研工作的认 识(B1a) 获取信息的能力 (B1b) 查阅资料的能力
2 2
1 2 6
1/2 1
1/2 1/3
2 3
(B1c) 发现问题的能力 (B1d) 表述课题的能力 (B1e) 因素 值 3 2 3 1 3
1 表 11
1/2
1/3
1/3
1
指标 B2 下三级指标的两两对比矩阵 对科研方法的了解 (B2b) 3 1 1/2 指标 B3 下三级指标的两两对比矩阵 对具体研究手段的了解(B3a) 1 1/7 运用各种调查方法的能力(B3b) 7 1 根据现实情况设计研究方案的能力 (B2c) 3 2 1
比 因素
对科研理论的了解 (B2a) 1 1/3 1/3 表 12
对科研理论的了解(B2a) 对科研方法的了解(B2b) 根据现实情况设计研究方 案的能力(B2c) 因 素 值
比 因素
对具体研究手段的了解(B3a) 运用各种调查方法的能力(B3b) 表 13 比 因素 值 因 素
指标 B4 下三级指标两两对比矩阵 掌握基本的统计学知识(B4a) 1 1/5 运用图表等方式表述研究结果(B4
b) 5 1
掌握基本的统计学知识(B4a) 运用图表等方式表述研究结果(B4b) 表 14
指标 B5 下三级指标两两对比矩阵 了解论文获报告撰写的一般过程(B5a) 1 1/3 语言表达能力(B5b) 3 1
比
因 素
值
因 素
了解论文或报告撰写的一般过程(B5a) 语言表达能力(B5b)
4.3.2 权重的计算 通过运用相关的 AHP 分析软件进行统计分析,可以确定小学教师科研能力评价指标体系中各阶 层因子的权重系数,相关原理见附录二。经检验,矩阵 1、2、3、4、5、6 均具有比较满意的一致性, 由此确定小学教师科研能力评价指标体系的权重体系为如表 15。
表 15 一级指标 二级指标 小学教师科研能力评价指标体系权重系数表 权重 1 三级指标 对科研工作的认识 获取信息的能力 选题能力 0.4041 查阅资料的能力 发现问题的能力 表述课题的能力 小学教师科研 能力 设计方案的能力 0.2648 对科研理论的了解 对科研手段的了解 根据现实情况设计研究方案的能力 对具体研究手段的了解 实验操作能力 整理、分析能力 0.0891 0.1894 7 运用各种调查方法的能力 掌握基本的统计学知识 权重 2 0.1226 0.1804 0.2126 0.3845 0.0999 0.5888 0.2518 0.1594 0.8750 0.1250 0.8333
运用图表等方式表述研究结果 了解论文或报告撰写的一般过程 科研成果表述的能力 0.0526 语言表达能力
0.1667 0.7500 0.2500
注:表中权重 1 为该二级指标相对于一级指标的权重系数;权重 2 为该三级指标在其所属二级指标中的权重系数。
4.4 评价标准和考评方式的确定 由上一阶段统计分析结果可以看出,小学教师科研过程中必须具备的五种能力中,选题能力最 为重要,因此,在设计具体的评价标准体系时,这一考察范围内的问题所占总分值最高,最为重要。 在具体的问卷设计中,与每一个三级指标相对应的设计同样数目的问题,由教师本人填写,填 写后进行统计分析。评价标准有五个维度:优秀、较好、一般、较差、很差,评分标准为 5、4、3、 2、1,计分时对应相应的评价指标计分,最后,按照该评价指标在总体评价指标体系中所占的权重 值算出该教师在该能力上的得分。为了避免教师自评可能出现的隐瞒情况,拟采用自评问卷和教师 互评同时进行的方式,对于观念性的问题请教师自我评价,以避干扰,同时,采用教师互评的形式 以避免自评过程中可能出现的隐瞒情况,得到教师真实的研究能力的数据。在结果的统计方面,自 评占考核成绩的 40%,教师互评占 60%。小学教师科研能力自评问卷和教师互评表见附录三。 通过对教师的科研成果进行考察,如抽查教师的科研论文,听取教师的工作汇报等方式,然后 依据本指标体系对教师
各项能力打分,分值等级为:2、4、6、8、10,含义为:很差、较差、一般、 良好、优秀;1、3、5、7、9 为中间值。 假设:某教师自评量表和测验得分如表 16。 首先:根据其三级评价指标得分算出其各二级指标得分:选题能力得分=(对科研工作的认识+ 获取信息的能力+查阅资料的能力+发现问题的能力+表述课题的能力)×40.4100%,即某一个二级评 价指标的得分等于该评价指标下所有三级指标的具体得分之和乘以该二级评价指标的权重,该教师 自评量表的总得分为各项二级指标得分之和。同理,该教师的测验中某一二级评价指标得分的计算 方法也是该指标下所有三级指标得分之和乘以该二级指标的权重。 测验得分为各二级指标得分之和。 经计算,该教师自评量表与测验的得分如表 17。 第二:计算该教师最后的得分为自评量表得分乘以 0.4 加测验得分乘以 0.6,即为该教师的科 研能力水平得分:18.4824216。 第三:计算加权后的满分。各项二级指标的满分乘以权重,得到表 18。
表 16 三级指标 对科研工作的认识 获取信息的能力 查阅资料的能力 发现问题的能力 表述课题的能力 对科研理论的了解 对科研手段的了解 根据现实情况设计研究方案的能力 对具体研究手段的了解 运用各种调查方法的能力 掌握基本的统计学知识 运用图表等方式表述研究结果 了解论文获报告撰写的一般过程 语言表达能力 总分 某教师的自评量表及测验得分统计表 分 值 10 10 10 10 10 10 10 10 10 10 10 10 10 10 140 自评量表得分 10 8 4 8 10 8 6 6 8 6 8 6 8 8 106 测验得分 8 6 3 4 5 4 4 6 6 6 4 6 7 7 76
表 17 某教师自评量表及测验得分加权后的成绩统计表 8
二级指标 选题能力 设计方案的能力 实验操作能力 整理、分析能力 科研成果表述的能力 总分 16.5681 6.476328 1.159028 2.651936 0.838768 27.69416
得 自评量表
分 测验 10.5066 3.7072 3.708558 1.06872 0.733936 19.726372
表 18 加权后自评量表和测验的满分对照表 二级指标 选题能力 设计方案的能力 实验操作能力 整理、分析能力 科研成果表述的能力 总分 50 30 20 20 20 140 满分 20.205 7.94685 1.78312 3.78848 1.04846 34.77191 加权后满分
第四:计算最后的满分。自评量表满分×0.4+测验满分×0.6=最终的满分,根据以上算式得到 自评量表和测验的最终的满分为 29.2084044。 第五:进行比较。教师得分高于满分的 85%为优秀,70%-85%之间为较好,60%-75%之间为一般, 45%-69%之间为较差,得分低于满分的 45%为很差。 由以上数据可以看出,该名教师最后得分为总分的 63%,属一般水平。 运用以上方法在测验教师的整体科研能力水平的同时,还可以直观的测量出教师各项基本能力 水平的高低,
有利于教师更有针对性的改善和提高自己的科学研究能力水平。 5、结论 从以上研究过程来看,在整个小学教师科研能力评价指标体系中,最为重要的能力是选题能力, 包括资料的收集、文献的查阅以及课题的确定,要求教师具有较高的洞察力、分析能力,同时,要 求教师要成为开放型的教师,随时同社会保持紧密联系,关心社会动向,了解相关的学术动态,并 运用到自己的学术研究或教育实践当中。另外,整理、分析能力也在整个评价指标体系中占有相当 重要的地位,它要求教师有扎实的统计学知识和严谨的治学态度。搞好小学教师科研能力评价指标 体系的研究和设计是相当有必要的,它对提高我国小学教师的科研能力水平有着必不可少的推动作 用。
9
参考文献: [1] 许树柏.层次分析原理.天津:天津大学出版社,1988。 [2] 李宴喜, 陶志.层次分析法判断矩阵的群组综合构造方法.沈阳师范学院学报 (自然科学版) , 2002,20,2:p86-90。 [3] 陈蕴衡,张艳梅.层次分析法中确定判断矩阵的灰色统计方法.山西计,1995,7:p29-31。 [4] 谢承华.AHP 及其应用.兰州商学院学报,2001,17,2:p79-82。 [5] 叶德平.AHP 法在风险投资项目综合评价中的应用[J].科技与管理,2004.5。 [6] 靳景玉.朱永贵,基于 AHP 的风险投资环境各层次因素权重确定[J]. 技术经济与管理 研 究,2005 .2。 [7] 王莲芬.层次分析法引论[M].北京:中国人民大学出版社,1990。 [8] 侯光文著教育测量与教学评价.明天出版社,1991.p79-83。 [9] 李秉德.教学论.人民教育出版社,1994.53-56。 [10] 陈玉琨.教育评估的理论与技术.广东高等教育出版社,1987 。 [11] 李方著.现代教育管理技术.华南理工大学出版社,1995.p363-406。 [12] 孟庆茂.刘红云.大学教师教学效果评价维度结构及影响因素研究.心理科学,2003, 4.p617。
10
致
谢
感谢指导教师刘玉娟教授在百忙之中对作者的关心、指导和教诲。 在本毕业论文撰写期间,得到了指导老师刘玉娟教授很大的帮助。指导老师刘玉娟教授给作者 提供了丰富的材料,扩展了作者的眼界,开阔了思路。毕业论文的撰写自始至终都是在刘玉娟老师 全面、具体的指导下进行的。 感谢答辩组的其他老师(付建中教授、董慧娟教授、胡玉萍讲师、刘成刚讲师、刘艳讲师、陈 秀英讲师)及评建办的张存桂教授、孟祥军讲师对作者提出了宝贵的意见,帮助作者顺利完成论文。 感谢刘老师对我的关心和帮助,感谢我的同学对我工作的支持。
11
附录一:调查问卷 尊敬的老师:
指导语:首先对您在百忙中填写本问卷表示感谢!本问卷旨在确定小学教师科研能力评价指标 中各项的权重,为
提高教师教育科研能力研究提供依据。您的客观填写是本研究科学性的保证。回 答没有正误之分,但求实事求是。本问卷调查是为小学教师科研能力评价指标体系的确立提供数据 支持,不会对您的个人能力作任何评价,不涉及您的个人隐私,答案严格保密,请您放心填写。 说明:问题为两两对比的形式,同一题目中会出现两个不同因素的重要性对比,请您在后面括 号中填入您认为的一个因素相对于另外一个因素的重要程度。 不同的重要程度由不同的数字来表示, 详见下表:
标度 1 3 5 7 9 2、4、6、8 表示两个因素相比,具有同样的重要性 表示两个因素相比,一个因素比另一个因素稍微重要 表示两个因素相比,一个因素比另一个因素明显重要 表示两个因素相比,一个因素比另一个因素强烈重要 表示两个因素相比,一个因素比另一个因素极端重要 为上述相邻判断的中值 含义
例如题目为:一个人的人品相对于他的能力;选择项为:人品( )能力( ) ,如果您觉得相对 于能力来讲,人品强烈重要,则在人品后面的( )中填 7,能力后面的( )不用填;如果您觉得 能力稍微重要,则在能力后面的( )中填 3,人品后面的( )不用填。填完之后结果如下: 一个人的人品相对于他的能力 人品(7)能力( ) 或者: 一个人的人品相对于他的能力 人品( )能力(3) 题目中各因素的具体含义: 对科研工作的认识:正确理解小学教师开展科学研究的实际目的。 获取信息的能力:通过电视、书刊杂志、报纸、网络等媒体获取学术上的最新动态的能力。 查阅资料的能力:通过查阅各种书籍和各种网络资料库获得自己所需要的学术资料和数据 的能力。 发现问题的能力:从各种媒体和日常生活中,通过观察和了解,发现目前小学教育领域内 存在的问题或研究尚不充分的课题的能力。 表述课题的能力:确定研究方向后,能用最简洁的语言表述出研究内容,即确定科研论文 (或报告)题目的能力。 对科研理论的了解:即对所涉及到的学科基础理论和科学研究基本方法(包括统计学方法) 的了解。 对科研方法的了解:会运用各种实际操作方法进行调查研究。 根据现实情况设计研究方案的能力:分析现的条件,从实际出发,制定出一套最合理的研 究计划,包括研究的时间、手段等。 对具体研究手段的了解:了解实验法、问卷法、观察法、访谈法、文献法等研究方法的具 体内容,并且知道在何种情况下运用何种方法能达到最理想效果。 运用各种调查方法的能力:会正确的操作各种研究方法,合理安排进度,科学取样,最大
12
程度上避免误差的
产生。 掌握基本的统计学知识:在取得原始数据后,会进行初步的数理统计,会运用各种统计学 软件进行分析。 运用图表等方式表述研究结果:论文撰写的过程中,会运用文字以外的统计图、统计表等 方式表述较为抽象的数据,使研究结果简明易懂。 了解论文或报告撰写的一般过程:知道论文的一般格式,能够写出一篇合乎标准的科研论 文或报告。 语言表达能力:会合理的组织语言,使文章在具备科学性和专业性的基础上尽量做到简明 易懂,不刻意堆砌专业性很强的专有名词。
题目: 第一部分,在科研活动中: 1、 选题能力对比设计研究方案能力 选题能力( ) 设计研究方案能力( ) 2、 选题能力对比实验操作能力 选题能力( ) 实验操作能力 3、 选题能力对比整理分析数据的能力 选题能力( ) 整理分析数据的能力( ) 4、 选题能力对比科研成果表述的能力 选题能力( ) 科研成果表述的能力( ) 5、 设计研究方案能力对比实验操作能力 设计研究方案能力( ) 实验操作能力( ) 6、 设计研究方案能力对比整理分析数据能力 设计研究方案能力( ) 整理分析数据能力( ) 7、 设计研究方案能力对比科研成果表述能力 设计研究方案能力( ) 科研成果表述能力( ) 8、 实验操作能力对比整理分析数据能力 实验操作能力( ) 整理分析数据能力( ) 9、 实验操作能力对比科研成果表述能力 实验操作能力( ) 科研成果表述能力( ) 10、 整理分析能力对比科研成果表述能力 整理分析数据能力( ) 科研成果表述能力( ) 第二部分,在选题过程中: 1、 对科研工作的认识对比获取信息的能力 对科研工作的认识( ) 获取信息的能力( 2、 对科研工作的认识对比查阅资料的能力 对科研工作的认识( ) 查阅资料的能力( 3、 对科研工作的认识对比发现问题的能力 对科研工作的认识( ) 发现问题的能力( 4、 对科研工作的认识对比表述课题的能力 对科研工作的认识( ) 表述课题的能力( 5、 获取信息的能力对比查阅资料的能力
13
) ) ) )
获取信息的能力( ) 查阅资料的能力( 6、 获取信息的能力对比发现问题的能力 获取信息的能力( ) 发现问题的能力( 7、 获取信息的能力对比表述课题的能力 获取信息的能力( ) 表述课题的能力( 8、 查阅资料的能力对比发现问题的能力 查阅资料的能力( ) 发现问题的能力( 9、 查阅资料的能力对比表述课题的能力 查阅资料的能力( ) 表述课题的能力( 10、 发现问题的能力对比表述课题的能力 发现问题的能力( ) 表述课题的能力(
) ) ) ) ) )
第三部分,在设
计研究方案工作中: 1、 对科研理论的了解对比对科研方法的了解 对科研理论的了解( ) 对科研方案的了解( ) 2、 对科研理论的了解对比根据实际情况设计研究方案的能力 对科研理论的了解( ) 根据实际情况设计研究方案的能力( ) 3、 对科研方案的了解对比根据实际情况设计研究方案的能力 对科研方案的了解( ) 根据实际情况设计研究方案的能力( ) 第四部分,在实验操作过程中: 对具体研究手段的了解对比运用各种调查方法的能力 对具体研究手段的了解( ) 运用各种调查方法的能力( ) 第五部分,在数据统计的过程中: 掌握基本的统计学知识对比运用图表等方式表述研究成果 掌握基本的统计学知识( ) 运用图表等方式表述研究成果( ) 第六部分,在科研成果表述的过程中: 了解论文(报告)的一般撰写过程对比语言表达能力 了解论文(报告)的一般撰写过( ) 程语言表达能力( ) 统计结果:第一部分
人 数 题 1 2 3 4 5 6 7 8 9 10 14 1 5 9 18 55 1 1 1 1 2 1 1 2 5 20 1 23 3 3 4 37 10 1 1 3 10 1 目 2 2 10 3 10 18 8 42 1 12 42 45 19 29 2 34 25 6 1 29 13 24 14 20 67 2 15 3 34 53 15 20 48 15 13 10 6 1 55 13 3 67 21 1 3 5 1 27 1 1 1 1 2 1 1 标 度 1/9 1/8 1/7 1/6 1/5 1/4 1/3 1/2 1 2 3 4 5 6 7 8 9
第二部分
人 数 题 1 2 3 4 5 6 7 8 9 10 2 1 1 1 1 12 9 1 32 1 目 1 1 1 9 1 10 30 12 15 20 44 7 20 18 2 58 1 3 43 17 13 12 39 40 2 15 1 9 8 22 58 5 60 18 21 20 6 15 3 25 20 13 50 2 28 29 57 45 11 30 4 2 15 20 1 5 7 2 1 1 2 1 1 3 2 2 5 2 1 3 1 标 度 1/9 1/8 1/7 1/6 1/5 1/4 1/3 1/2 1 2 3 4 5 6 7 8 9
第三部分
人 数 题 目 1 2 3 1 3 4 1 2 3 2 5 16 30 23 32 48 45 21 18 28 12 9 16 14 2 9 9 3 3 1 1 标 度 1/9 1/8 1/7 1/6 1/5 1/4 1/3 1/2 1 2 3 4 5 6 7 8 9
第四部分
人 数 题 目 1 2 3 8 15 45 29 10 标 度 1/9 1/8 1/7 1/6 1/5 1/4 1/3 1/2 1 2 3 4 5 6 7 8 9
第五部分
人 数 题 目 1 2 6 8 61 18 14 2 1 标 度 1/9 1/8 1/7 1/6 1/5 1/4 1/3 1/2 1 2 3 4 5 6 7 8 9
第六部分
人 数 题 1 目 2 13 19 32 12 12 9 2 标 度 1/9 1/8 1/7 1/6 1/5 1/4 1/3 1/2 1 2 3 4 5 6 7 8 9
注:表中人数一栏的数字为选择该标度的人数,空格表示没有人选该标度。
15
附录二: 两两对比矩阵中权重的确定
矩阵一中各项因子权重系数具体的计算方法如下: 运用线性代数的知识对各阶层判断矩阵进行计算,求其特征向量,此处运用的方法为和积法。 对矩阵 1 的分析过程: 第一步,将判断矩阵每一列归一化:
m 为判断矩阵中因子的个数; i 为横行因子个数,j 为竖行因子个数,i、j=m; 为矩阵中的第 j 个因子; 为矩阵中第 i 个因子; 为二者的比值)
第二步,每一列经正规化的判断矩阵按行相加:
( 第三步,对向量 作正规化处理:
)
则,
即为所求特征向量。
第四步,
计算判断矩阵的最大特征根
式中,
表示向量
的第 个元素。
第五步,检验 由于客观事物的复杂性或对事物认识的片面性,通过所构造的判断矩阵求出的特征向量(权值) 是否合理,需要对判断矩阵进行一致性和随机性检验,检验公式为:
式中,
为判断矩阵的随机一致性比率;
16
为判断矩阵一致性指标;它由下式计算: 为最大特征根; 为判断矩阵阶数; 为判断矩阵的平均随机一致性指标。 由大量试验给出,对于低阶判断矩阵, 要进一步查资料或采用近似方法。
层次分析法的平均随机一致性指标值 M RI 1 0.00 2 0.00 3 0.58 4 0.90 5 1.12 6 1.24 7 1.32 8 1.41 9 1.45 10 1.49 11 1.51
取值列于表 5.4。对于高于 12 阶的判断矩阵,需
从表中可以看出,本矩阵中因子数为 5,则 根据以上公式计算可验证
取值应为 1.12。
小于 0.1,有比较满意的一致性。
同理,运用以上公式可算得矩阵 2、3、4、5、6 的 CR 值。
17
附录三:小学教师科研能力自评问卷和教师互评表
小学教师科研能力自评问卷
尊敬的老师: 本调查表目的在于通过对小学教师科研能力进行调查,提高广大小学教师的科研水平,促进教 育事业的发展。本问卷结果仅作为研究资料使用,严格保密,决不外泄,请您如实填写。您的实事 求是是我们研究工作的重要保证,我们将对您的配合不胜感激。 说明:以下问题请您按照您的自身情况选择,在相应的选项上打勾。答案没有对错之分。 1. 您觉得您清楚小学教师为什么要搞科研吗? a) 完全不想了解 b) 不清楚 c) 有一点明白 d) 明白但是觉得没必要 e) 觉得很有必要 2. 您知道的获得资料的渠道有哪些?请列举: 3. 您擅长从大篇幅的文章中概括出最核心的东西吗? a) 完全不擅长 b) 不擅长 c) 一般 d) 比较擅长 e) 很擅长 常常从一大堆里不清头绪的问题中找到解决方法 a) 一想到就头大,所以从来不靠近那些事情 b) 没试过,不清楚 c) 试过,但是好像把自己也绕进去了 d) 解决过,用了很长时间 e) 很擅长解决这类问题,常常一眼就看出关键所在 您写的文章题目常常言简意赅? a) 从来不,常常被别人说题目太罗索 b) 一般情况下是,不过遇到复杂问题就表述不太清楚 c) 是,尽量写的简短,不过有时会不明确 d) 是,不爱写长题目 e) 是,而且常常被人说表达明确 您是否喜欢了解一下现在最新的教育理论并有兴趣自己私下验证一下? a) 没兴趣,还是老方法保险 b) 不会,工作太忙没时间 c) 有时间会了解一下,但是不会实践 d) 简单的话会试一下 e) 会尽量找时间实践一下 如果现在我们请您加入我们的工作小组中,您是否感到工作内容很陌生,不能很快适应呢?
a) 会,很不适应 b) 会有一点
18
4.
5.
6.
7.
8.
9.
c) 应该不太会,我对你们的工作了解一些 d) 不会,以前也做过 e) 完全不会 很了解并且常常这么做 如果让您做一项研究,您会先分析现实情况然后作计划吗? a) 完全不会,不知道该干嘛 b) 不会,喜欢随兴而为 c) 会 d) 会,而且分析得比较全面 e) 会,全面考虑之后才会开始进行 您知道有多少种研究方法吗?请列举出来:
10. 如果请您来进行问卷调查,您了解您要做的工作吗? a) 完全不了解 b) 不太了解 c) 知道一些 d) 大部分都了解 e) 很得心应手 11. 您经常用统计学知识来为您的论点作证吗? a) 对统计学完全不了解 b) 不会,太麻烦 c) 会,不过能不用就不用 d) 会 e) 经常,觉得很能说明问题 12. 您经常用图表来表达一些抽象的概念吗? a) 从不 b) 有,但是很少 c) 偶尔 d) 经常 e) 每次都会用 13. 您知道标准的学术论文有哪几个部分吗?请列举: 14. 您觉得您在表达一件事情的时候,别人常常很快就明白吗? a) 从来没有 b) 要很长时间 c) 有时候是 d) 经常 e) 每次都能说得很清楚
计分方法: a记 2 分 b记 4 分 c记 6 分 d记 8 分 e记 10 分 对于列举题, 按照所列举出的正确答案计分, 全部列举出来记 10 分, 列举出 80%记 8 分, 以此类推。
19
教师互评表
教师互评表 因素 对科研工作的认识(B1a) 获取信息的能力(B1b) 查阅资料的能力(B1c) 发现问题的能力(B1d) 表述课题的能力(B1e) 对科研理论的了解(B2a) 对科研方法的了解(B2b) 根据现实情况设计研究方案的能力 (B2c) 对具体研究手段的了解(B3a) 运用各种调查方法的能力(B3b) 掌握基本的统计学知识(B4a) 运用图表等方式表述研究结果(B4b) 了解论文获报告撰写的一般过程 (B4b) 语言表达能力(B5b) 得分 评价
评定标准:完全不理解、不具备、不会运用可打 2 分和 2 分以下;一知半解可打 3 到 4 分;基 本上了解可打 5 到 6 分;理解并且运用基本上没有错误可打 7 到 8 分;了解清楚,运用熟练,表达 清楚流畅、准确可打 9 到 10 分。
20
21