信息检索实习绩效评价量规设计

【摘 要】信息检索课实习效果评价问题已引起广泛关注,如何客观、公开、公正地对学生实习绩效进行评测是一个难点.本文从评价量规的角度入手,对实习报告的结构内容进行重新设计,使各个项目具有客观评价特征,并就实习报告不同模块的特点提出了相应的判分方法.

【关 键 词】信息检索文献检索实习实验考试成绩绩效评价量规

1.引言

信息检索课在高校非图书情报专业中被定位于信息素质课,选修专业覆盖文、理、工、农、医、艺术各个专业,开课对象从一年级新生到研究生,在一些学校成了公共选修课甚至专业选修课中的第一大课,关于信息检索课的教学研究成果丰富.笔者选用维普中文期刊数据库采用检索表达式“标题或关 键 词等于（（信息检索+文献检索+情报检索+计算机检索+文检）*（课+教学）-题名等于（简介））-作者等于（无）”查找与信息检索课相关的论文,再采用检索表达式“题名或关 键 词等于（(文献检索+信息检索+计算机检索+情报检索+文检)*课*(实习+实践+上机)-题名等于（简介））-作者等于（无）”查找与信息检索课实习相关的论文,剔除不相关的文献后将两者数据进行对比,可以看到从手工检索、联机检索、光盘检索到网络和电子文献教学,研究内容随着检索条件的改善而转移,对于信息检索课的关注大致可以分成三个阶段,1995以前属起步阶段,1996-2000年是初盛阶段,2001年以来呈蓬勃之势,其间与实习有关的研究从2000年起开始则增多（见表1）.

2004年以后,关于信息检索课学习效果评价的客观、公正和全面的问题开始引起重视.(郭丽翔,郑辉,2004)认为“准确评定学生在课程结束时的学习成绩,一直是这门课没有很好解决的问题之一.虽然各学校都有自己的考核方法,但始终没有建立一个相对客观、比较统一的、能够反映学生学习成绩的考试系统和标准.”文章建议各高校图书馆协作,通过完善考试题库的方法来解决成绩评定标准化的问题,但没有提到与卷面考试同等重要的实习报告、综合报告成绩评定的客观性和标准化问题.(陈新颜,2006)认为教师因材施教,学生自主学习,图书馆机检条件和师生利用网络工具双向交流和实习报告的讲评,是构建实习质量评价体系的四要素,开始关注实习效果的测评问题.(何钧,2006)认为单纯以卷面考试或实习报告（包括综述形式）作为期末成绩主要依据都有问题.看到卷面考试作为测评的局限性,认为这种形式无法考查学生文献检索技能掌握的程度,以及运用检索技能进行信息收集、整理与分析研究能力.同时认为单纯以实习报告或综述报告作为期末成绩评定依据教师作业批改量太大,对教师专业知识要求高,没有标准答案,成绩评定缺乏客观性.文章提出期末成绩由卷面考试、实习报告和出勤率等综合成绩组成,降低实习报告和综述的比重,以此降低主观评定对总评成绩的影响.(杜春光,杨广林,2007)首次提出了信息检索课学习评价量规,包括信息获取与文化、信息获取、信息甄别、信息利用、信息道德与法律意识五个一级指标,但缺乏可操作性.作者也认为这一量规还需要进一步给出二级指标的权重,选择合适的教学模型才可应用.(刘颖等,2009)看到了实习成绩评定方法对实习教学的重要性,将思路定位在实习环节多要素的主观评价上,认为“如何利用多元化评定手段,如实习报告、平时上机、综合实践等方法体现该课程的实践性值得研究.”(王玉香,2010)也看到了单纯以卷面考试或综述报告作为期末总评成绩的问题,提出将平时上机实习成绩和上课表现也纳入期末总评成绩.为了提高对实习能力的考察的客观性,文章提出将上机操作题和对编制检索表达式方面的能力考察以客观题的形式呈现,并纳入标准化考试题库.以这种形式考察信息检索综合能力的方法实际上已被许多学校采纳.

综上所述,信息检索课实习效果评价问题已引起广泛关注,也认识到这一问题的格式化、定量化评测标准的制定是非常困难的,因此所提方案均是避险而行,退而求其次的办法,实际上并不能解决现有的问题.本文从评价量规的角度入手,对实习报告的内容进行重新设计,使各个项目本身具有客观评价特征,并就实习报告不同模块的特点给出了相应的判分方法.

2.信息检索实验量规设计

2.1量规概述

标准化考试引入中国教育界已有很多年,只是在以实践为特征的信息检索课中的应用时间较短.标准化的考试形式不利于学生创造力、批判性思维和想象力的发挥,这种测评手段也不能有效地判断学生在小组合作项目、真实情景任务等复杂学习活动中的表现情况(何晔,2008).从教学的角度看,量规（Rubric）是对学生学习绩效,包括学习过程中的行为、认知、态度和各种形式学习成果进行定性或定量评价的一套标准,特别适合于基于任务驱动、项目学习或问题求解的活动,这种学习绩效评价所要求的评价方法不但要关注学习结果,更要关注学习过程.大多数量规在形式上是从多个维度划分等级和规定评价准则的二维表(钟志贤等,2007).

一个有实用价值的学习绩效评价量规具有以下特点(Jonassen,1999)：

（1）与教学目标、教学特点、学生认知水平和学习环境特点相适应,提高评测的针对性,使训练目标更为突出；

（2）包括含有重要的评测点,便于对学生学习态度、知识领会、能力达标有全面的考虑；

（3）评测点的权重设定与教学重点和重要性相一致.对实习过程中反映出来的诚信问题、态度问题、理解问题、效能问题、粗心问题、笔误问题等应按问题的严重程度给出不同的权值,以利于强化问题意识,加强引导；

（4）评测项目应客观明确,具有可操作性.主观的、粗糙的指标既不公平也不利学生认识问题所在；

（5）评测点是评测项目细分的最小单元,不可再分.只有测评点是不可再分的考查项目,才能使问题具体化、也才能明确学生哪部分内容掌握了,哪部分还没掌握.

（6）评测量规不仅是教师评价学生学习绩效的依据,也是与学生沟通、发现教师教学中的问题的一个平台,因此,量规不仅要便于教师理解,也要便于学生理解.