单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,2021/3/7,*,单击以编辑母版标题样式,单击以编辑母版文本样式,第二级,第三级,第四级,第五级,2021/3/7,*,对考试质量分析的一点认识,胡 晶,2021/3/7,1,几 个 问 题,一、考试质量分析的意义,二、对电大考试的几点认识,三、考试质量分析的基本内容,四、考试质量分析的基本方法,五、我曾经做过的一个实例,2021/3/7,2,一、考试质量分析的意义,考试是一种有目的、有计划地对人的知识、技能和能力等方面的个体差异进行测度和甄别的社会活动。,与人类其他社会活动一样，在考试活动实施之前，就要有对考试欲达到的结果进行预期和设计，对考试活动开展的途径、方法、手段和措施进行选择和规划。,由于受人的,认识能力的局限,、,客观控制水平的限制,和,环境变化的影响,，人们在实际的考试活动中难免出现各种偏差，进而造成考试活动的实际结果和考试目标之间的差距。对考试质量进行科学的分析，探明造成偏差的原因，明确考试结果和考试目标之间距离的大小，对改进和完善考试工作，合理解释和正确使用考试结果等都至关重要。,2021/3/7,3,具体表现为,1.有利于改进和完善考试工作。,2.为客观评价考试质量提供依据，有利于正确使用考试结果。,3.为科学研究积累素材，有利于促进考试科学化的实现。,2021/3/7,4,二、对电大考试的几点认识,一方面可以促进学生全面复习所学的知识和技能，把所学知识系统化、条理化、浓缩化，融会贯通；,另一方面又可以及时了解教学中存在的问题，获得教学的反馈信息，使教学工作更具有针对性，对改进教学和提高教学质量提供有价值的参考。,1.从作用上讲，教与学两重,性,考试是教学过程的一部分。,2021/3/7,5,成绩评定：从对课程学习的所有知识点中抽出一部分具有代表性的内容对学生进行测试和甄别，通过这种测试和甄别达到对该学生课程学习情况做出一个定量的评估。,水平考试：即过关考试，达到60分就达到了过关的水平，就可以得到相应的学分。,2.从功能上讲，两重性,因此，电大的考试就是一把度量尺子，或是一杆秤；具有远程教学特色的电大考试，“指挥棒”的作用比起其他高校尤为突出。,既是成绩评定，又是水平考试。,2021/3/7,6,我们,每个教师每学期都有多门课程的命题任务。在一定意义上讲，教师站在了电大的出口处。,3.电大教师的角色,要为电大把好出口关，也体现了教师的责任重大。,因此，教师的质量意识、教师的基本素质和业务能力、教师的品牌意识可以充分体现。,考试质量的优劣，它关系到电大的教育质量。,电大要得到社会的认可，要创出品牌，这个环节更为重要。,2021/3/7,7,近两年来，教学两部及教务处的领导非常重视开放教育的课程改革，特别是课程考核改革，加大了形成性考核的改革力度以及网考的改革力度，把考试质量分析和试卷分析提高到了一个新的高度-每位教师必做的事情。,体现了电大人对电大教学质量的重视，许多教师对电大课程考核改革，从理论研究到教学模式的设计与教学实践的积极探索，可以说都是创新性的研究。,4.近几年的变化,2021/3/7,8,三、考试质量分析的基本内容,如何来衡量我们用于衡量学生学习是否合格所做的度量工具“尺子”或“秤”是否准确和科学呢？,它能否达到我们所希望的考试目的呢？,1.考试目的的恰当性,这是考试活动的前提。,即要弄清设计考试的依据何在，考试目的是否准确反映了对人才评价和甄别的需求等。,它应包括：考试形式与内容的相符性、方法与目的、计划与结果的一致性等。,2021/3/7,9,考试计划是考试活动开展的灵魂。,具体分析内容包括：考试内容是否具有针对性、代表性，考试标准是否科学、合理；考试类型、方法、题型选择是否恰当等。,2.考试计划的科学性,2021/3/7,10,3.考试计划实现的程度,执行考试计划的过程是按照考试计划要求实施操作的过程。它包括：“量尺”制作（编制试卷）、实际测量（施测，即考试过程）和获取数据（阅卷评分）等内容。,量尺制作-编制试卷的,核心是精确度,；,测量过程-考试过程的,重点是规范化,；,获取数据-阅卷评分的,关键是真实、准确,。,如：试卷编制的精确性-试题陈述是否准确、清晰；内容是否科学、具有代表性；选项是否新颖、具有关联性；答案是否准确、无歧义；难度、区分度是否适宜等。,2021/3/7,11,考试结果是人们从事考试活动的结晶。,考试结果的质量优劣直接决定了考试结果可利用的价值。,分析考试结果质量优劣，主要是探明其结果的有效性和可靠性，一般包括考生分数分布的状况、效度、信度、区分度、考生答题情况等。,4.考试结果的质量,2021/3/7,12,四、考试质量分析的基本方法,一般采用随机抽样的方法：,（1）简单随机抽样；,（2）等距随机抽样；,（3）分层随机抽样。,1.选取分析对象,2021/3/7,13,（,1）考生答卷：原始资料，考试质量分析的核心，是资料收集和整理的,重点,；,（2）考场动态记录收集与整理：考场气氛、考试纪律、答题速度等，是,重要参考依据,；,（3）阅卷评分记录与整理：考生答题情况（主观性试题）与评分误差（评卷质量），将记录归类后总结出带有共性的问题，分析结论时用，是,关键材料,。,（4）效标分数收集和整理：效标分数是指能够反映考试目的、独立于本次考试之外、用来作为本次考试参照标准的考试分数。是,最复杂、最难得到,的资料。,2.收集整理有关资,料,2021/3/7,14,3.统计分析,借助教育统计学、考试学理论与方法，,通过学生试卷上的各个题目的得分来计算一些数量指标的值，这些数值从不同的角度和不同的侧面反映试题的质量和试卷的质量，从而对考试质量做出统计推断。,数量指标主要有：,均值，标准差，难度，区分度，信度，效度，分布状态等。,2021/3/7,15,1均值(),表示考生的平均水平或集中趋势，即平均分数。,2标准差(,S,),表示考生成绩的离散程度。,数量指标,2021/3/7,16,表示考生解答某题或整个试卷的难易程度的指标。它,是衡量试题质量的基本指标之一。,其中 为第,i,题的得分率。,整个试卷的难度值为,一份好的试卷，其试题的难度值分布,3难度(,D,),2021/3/7,17,试题或整个试卷的区分度表示该试题或试卷区分考生能力大小的指标，即衡量是否能将优等生和劣等生区分开来的指标。,整个试卷的区分度为,理想状态下,V,的值越高越好,，但一般认为：,V,0.40，,试题很好；,0.3,V,0.4,，试题较好；,0.2,V,0.3,，试题较差，应予以修改；,V,0.4,0.7,0.7,7,24,38,24,7,第一学期,241,71.42,18.58,0.286,0.441,0.778,0.699,50,20.75,46,19.09,56,23.24,50,20.75,39,16,第二学期,276,73.83,17.78,0.262,0.407,0.631,0.699,48,17.39,4l,14.86,64,23.19,77,27.90,46,16.7,89级高等数学第一、二学期期末考试成绩抽样统计,考试质量主要指标与理想比较表 表,2,2.计算各个指标,这里将第一学期85100分65人作为高分组，O61分的65人作为低分组，第二学期85100分，O65分各73人分别作为高分组和低分组。,这里将两学期的考试互相作为鉴定标准，随机地抽出参加过两个学期考试的60名考生的成绩，计算其相关系数，即为所求效度值。,2021/3/7,26,表3 各题主要指标,学期,项目,第一学期,第二学期,一,二,三,四,五,六,七,一,二,三,四,五,六,七,八,满 分,15,15,12,18,18,12,10,6,12,12,16,18,6,10,10,平均分,10.45,11.12,10.05,15.48,12.62,6.06,5.86,11.36,9.92,9.96,11.96,13.35,4.80,5.75,6.71,得分率,0.697,0.741,0.837,0.860,0.701,0.505,0.566,0.710,0.826,0.830,0.748,0.742,0.80,0.575,0.671,难 度,0.303,0.259,0.163,0.140,0.299,0.495,0.434,0.290,0.174,0.170,0.252,0.258,0.20,0.425,0.329,区分度,0.332,0.247,0.336,0.315,0.543,0.809,0.623,0.313,0.247,0.361,0.494,0.410,0.44,0.563,0.483,类 型,难,一般,一般,一般,一般,难,难,一般,一般,一般,一般,一般,一般,难,难,2021/3/7,27,表4 第一学期各教学班各题得分率、均值、方差、分布状态一览表,教学班,人数,一,二,三,四,五,六,七,均值,方差,分布状态(人数),0-59,60-69,70-79,80-89,90-100,l,30,0.806,0.80,0.933,0.935,0.881,0.772,0.773,85,7.7,1,0,6,12,11,2,24,0.642,0.658,0.774,0.838,0.625,0.247,0.375,61.83,17.20,8,7,6,1,2,3,14,0.838,0.786,0.923,0.980,0.869,0.845,0.736,86.21,6.19,0,0,2,8,4,4,34,0.663,0.718,0.814,0.817,0.590,0.515,0.535,67.32,19.52,1l,6,7,4,6,5,20,0.533,0.73,0.675,0.75,0.536,0.35,0.315,57.55,22.57,9,6,1,l,3,6,41,0.79l,0.795,0.953,0.935,0.852,0.799,0.720,84.17,9.27,0,4,11,14,12,7,29,0.634,0.703,0.724,0.776,0.567,0.310,0.476,61.86,17.52,13,6,5,4,1,8,3l,0.656,0.754,0.815,0.844,0.622,0.258,0.529,65.71,13.19,6,10,1l,4,0,9,18,0.630,0.689,0.875,0.864,0.775,0.361,0.533,69.44,13.82,2,7,7,2,0,2021/3/7,28,表5 第二学期各教学班各题得分率、均值、方差，分布状态一览表,教学班,人数,一,二,三,四,五,六,七,八,均值,方差,分布状态,O-59,60-69,70-79,80-89,90-100,l,37,0.682,0.865,0.716,0.659,0.637,0.734,0.538,0.584,67.51,19.68,9,8,6,3,1,2,14,0.728,0.875,0.940,0.839,0.829,0,940,0.771,0.843、,83.57,5.67,0,1,2,8,3,3,26,0.555,0.673,0.737,0.524,0.558,0.590,0.388,0.477,56.42,25.83,13,3,4,5,l,4,29,0.648,0.802,0.784,0.776,0.807,0.770,0.617,0.655,73.52,13.53,5,5,9,6,4,5,41,0.803,0.811,0.898,0.877,0.822,0.874,0.659,0.822,82.24,7.95,0,2,15,15,9,6,30,0.804,0.917,0.928,0.898,0.887,0.967,0.88,0.847,88.4,9.83,1,0,5,6,18,7,19,0.734,0.829,0.886,0.809,0.839,0.842,0.537,0.526,76.0