熊锦:密西根大学课程评估介绍

  谢谢,在这里我首先要感谢我们教学发展中心的领导,我们的林主任和高主任给我去密西根大学访问的机会,我上个礼拜五刚刚回来。这次在美国密西根大学教学研究中心是作为他们的影子员工参加他们中心所有的服务,所有的活动。因此,我在这里非常乐意和大家一起分享我在那里学到的东西,那么今天的主要内容就是介绍一下密西根大学教学研究中心关于课程评估方面的服务。

  我今天内容主要是分成这两块:一块就是先简单的介绍一下密西根大学教学研究中心,第二块就是重点介绍一下他们的服务内容。密西根大学教学的研究中心简称成CRLT是他们的名字的缩写,它是北美第一所大学教学研究中心,是一个服务机构,主要为学校的教学提供服务。它是在1962年成立的,到目前为止差不多50年历史了,它在这个50年发展当中取得的非常有目共睹的成绩,目前已经是北美的大学教学中心学习的典范。密西根大学教学研究中心当初成立的使命主要有三点:第一就是要创建这个大学的教学文化;第二就是要帮助提高全校的教学水平,帮助老师花更少的钱更好去教学生让学生更大限度更好去学;第三就是帮助学校完成它的教育使命。那么中心的的员工目前是25名员工,其中是12个人是具有各个不同领域的博士学位,有文科、理科、工科还有社会学科的,那么他们组织一个非常强大的服务队伍来为全校的教学工作提供服务。

  这个是中心的的全家福。那么中心的提供服务有哪些呢?我们先来看一下中心的的年报,这个去年的年报。这个年报上面有很详细的统计数据,中心的在去年的一年里面总共为全校提供了一万八千八百多人次这样的服务,其中单个参加这样服务的老师是有4229个老师。中心的具体服务有哪些?就列在这边,有新进员工培训、有教学工作岗的研讨会、有教务长研讨会(教务长有类似于黄校长,就是他们学校主管教学的副校长)、还有研究生助教培训、中期学生反馈,教学咨询,课程评估,教学立项。这些活动除了新进员工我没有参加培训外(因为他们每年只弄一次,就是在八月底,所以这个没有参加),其他的都有参加了。各位领导、各位老师,如果对这个有兴趣的话,我们可以会后讨论。

  今天的重点内容就是介绍一下他们中心的关于院系课程评估这个方面的服务。因为这个课程评估是非常庞大的工程,就像今天上午孙老师给我们介绍了,这个A报告里面的评估,我私下里跟他交流,多长时间,是5-7年,所以说孙老师上午给我们介绍只是冰山一角,所以这是一个很大的话题。因此我就力图讲的更简洁一些,就是从这四个方面来讲,第一首先要简单介绍一下,为什么一个学校要做院系课程的评估;第二就是评估分哪三个阶段;第三重点介绍下密西根大学教学中心提供的服务里的单个课程的评估和整个院系的课程估

  首先说为什么需要评估体系。上午黄校长已经给我们有提到,在这里,我也引入他们教务长关于评估这样的申明:目前,社会上的各界人士包括学生、家长和社会,或者像公司里面的一些领导会对我们高等教育提出这样一个置疑:我们的学生送到学校里面去,大学到底要教学生什么,他们四年毕业以后到底学到了什么,我们有没有达到大学这样一个教育目标,因此我们的评估服务就应运而生了。

  上午黄校长介绍了在密西根大学每个院系都有自己的课程委员会,课程委员会每隔几年就会要求他们的教学研究中心来服务一次,对他们设的这个课程体系评估一下,看有没有要改进的地方去满足学生的需求。那么在提供评估之前,我们首先要反复强调一点,上午孙老师也强调了我们做这个认证的目标是为了改进,而不是为判断或者评价,不是法官判断你是好人还是坏人或者判断你的工作做的怎么样,好还是不好,我们评估的目标是为了提高,因此我们作用相当于是医生,我们通过各种各样的方法方式来对这个课程体系设置进行分析、提出改进建议,因此我们的目标是为了帮助提高,这个要反复强调。

  那么关于密西根大学,整个的评估就分这两块,一个是单门课的评估,比如说新开了一门课效果怎么样,请中心来评估一下提一些改进建议,另外一个是整个课程体系的评估,这个也是他们年度报告。密西根大学这边的评估服务有三项内容:第一个就是重新审视课程设置,发现是否存在问题,我们应该怎么改进;第二个内容就是发展新课程的需求,对于一些新开设的课程,我们有哪些需求,我们应该做哪些方面的改进;第三个就是评估课程改革的效果,对目前一些课程改革的效果做一个评估,当然这个评估的目标不是为了批判你,而是为了发现问题,帮助改进。它服务的方式主要是数据收集和分析、提供改进咨询、帮助院系展开这样的讨论,称之为反思会。

  评估的三个阶段可以大体上分为这样的三个阶段,一个前期会谈,我们的主要目的就是为了获得评估的目的,评估老师会和系主任坐下来讨论,就是为什么要做这样的评估,它的目标是什么?第二大的阶段就是收集数据,有很多很多的方法,上午孙老师也介绍了一些方法。第三个大阶段就是后期会谈,有称之为反思会。这个阶段,中心会把所搜集到的数据形成一个报告,然后组织整个院系的老师一起来讨论这个报告,发现哪些问题是要去改进的。

  下面就介绍一下详细的情况,对于单门课,一门课怎么样去做评估。这里面单门课评估也是前面那三个步骤,三个阶段。第一个阶段前期会谈我要从系主任和上课老师那里了解他们为什么要做评估以及这门课目前有哪些问题。我先和系主任以及上这门课的老师坐下来讨论,问他们为什么要到中心来做评估,基本上就是像病人去看医生一样,都是知道自己有有哪些地方不舒服这样一些问题,一定要把系主任来中心的评估的目的搞清楚:就是你为什么要求这个评估服务,你目前这门课有哪些问题?他自己肯定多多少少知道一点才要求这个服务的,然后哪些地方是你希望改变,所以只要把这个目标确定很清楚之后,我们才可以进行下面的工作。在这里有一个例子,这个例子是他们密西根大学教学研究中心关于一门新课,叫网络社区这样的一门课,因为网络社区在美国包括在国内,都是用的很少,国内大部分人都是用开心网,人人网,他们就开了这样一门课,刚刚上完了一学期,然后系主任到中心去要求这个服务。比如说我们这门课是新开的,受不受学生欢迎,学生觉得这门课怎么样,我们哪些地方需要改进,因此它的评估目的就是这个。那么我现在知道这个评估目的之后,第二个阶段我就要去收集数据了,那么对于一门课而言,它非常简单,因为只有一门课,那么它收集数据就是从这三个方面来收集:一个就是从上这门课的老师收集;第二个从上过这门课和正在上这门课的学生那里收集;第三个就是从后续课程的老师那里来收集。比如电子系我是上半导体物理的,那么半导体物理的后续课程就是半导体器件,因为你要讲半导体器件前提是要求学生已经学了半导体物理,因此从上后续的课程里面的那些老师里面也可以收集到一些关于这门课上的怎么样的信息。

  比如说我从上这门课的老师那里来收集信息的时候,主要就是跟老师讨论这个课程设计的问题,这个课程目标一定要讨论清楚,你这门课你希望学生来这门课学什么东西,那学生毕业了之后,他能达到什么样的水平,这个是老师一定要想清楚的一个问题。那么老师在写教学大纲和教学目标时,怎么样来判断这个教学目标是不是一个很好的教学目标,我们有这样五个因素来判断:第一点这个教学目标是不是针对你这门课的,比如有一些老师说,我这个教学目标就是培养学生的动手能力,或者培养学生分析解决问题的能力。因为你这个教学目标可以放这门课上,也可以放到另外一门课,这一门课是培养学生动手能力,另外一门课它的目标也有可能是培养学生动手能力,因此你这个教学目标就不是一个很好的教学目标。第二点是可测量,你说你培养学生分析能力,那你怎么样去测量学生达到这个目标。有的教学目标说,我要培养学生理解和掌握半导体物理的基础知识,那你没有办法去测量他,你怎么去判断学生确确实实是理解和掌握了。其三点分别是AchievableRealisticTimely因此我们可以按照这样一个标准去重新审视一下我们这门课到底要教学生什么,比如这个有一个例子,就是我们刚才说的,密西根大学开的这一门新课,上了一个学期,系主任就到中心来评估服务了,那么跟教学老师讨论下来,他的教学目标就是有两个:第一个教学目标就是培养学生的分析能力,就是学生能够分析目前已经存在的网络社区;第二个教学目标就是培养学生设计和管理能力。那么根据我们这五个因素来分析的话,这个教学目标是可以改进的。因为你培养学生的分析能力和设计管理能力,你没有办法去测量它,去测量这个学生确实达到这样一个目标,因此,这个经过中心和授课老师反反复复讨论之后,把这个教学目标改成可测量的教学目标。我们把这个教学目标确定很清楚以后,第二件事情是我怎么样来考评学生是不是达到这样一个目标?上午孙老师介绍说,我的教学目标里面要用动词,那我在考评方式或者是在平时给学生布置的作业里面,也要用到这样一个动词,让学生能够做这样的事情。你这个教学目标确定了,你的考核方式也确定了,包括你对学生的任务,作业,这些东西都确认了以后,接下来就是我怎么样设计相应的教和学活动,比如我是要设计一些头脑风暴还是设计一些小组讨论或者辩论等等。这里面的内容,都可以开很多课堂讲座,我想教学发展中心也会做这方面的一些工作。因此有信心的话,各位领导可以推荐自己院系的老师多多参加我们中心的工作。这个是第一点,从老师那里获得的信息。

  从老师这里获得信息之后,我们就找学生讨论,主要是上过这门课的学生和正在上这门课的学生。第一个问题就是学生对这门课的期望值,他期望从这门课学到什么,学完了之后,他觉得最后实际所达到的东西学到的东西跟他的期望是不是一样,哪些地方是他期望从这门课里面学到,但是最后又没有学到,学生期望老师怎么教,怎么设计这门课,才能达到他的期望。在密西根大学,学校非常的重视学生的反馈意见。从学生这里收集来以后,还可以从后续课程的老师那里来收集,比如说我刚刚提到,半导体器件的前续课程就是半导体物理。那么半导体器件的老师,因为学生要上半导体器件前提是掌握半导体物理,那么这些老师上这门课,就是很清楚学生对于半导体物理的知识掌握点怎么样,比如哪些知识是学生掌握很好,哪些知识是学生的弱点,还没有掌握好的。比如说我上半导体器件,我需要这个方面的支持,半导体物理这这门课没有讲得很好,学生掌握得不好。这个上后于课程的老师是不是有一些改进意见,因此我们就收集了很多这样的数据,把这些数据都收集起来之后呢?就是首先把这些数据进行分析形成一个报告,有各个部门的统计图和百分之比的数据,以各种各样的形式形成这么一个报告,然后就坐下来就跟系主任以及这个老师谈,因为系主任和老师他不知道学生那边意见是怎么样的?他也不知道后续课程的老师意见是什么?因为我们就是作为中心,是很中立的,不加个人自己的观点,把所有的信息都收集来以后,和老师一起来谈,比如说哪些地方学生或者后续课程老师反映这一块我们做的非常好,哪些不好的地方需要我们改进,因此我们就要讨论改进方案。最终根据和系主任、授课老师讨论的讨论结果,我们中心再形成一个报告提交给系主任。对于中心的而言,关于单门课的评估,就结束了;作为院系而言,中心提供这个改进方案,院系接不接受就由他们自己来决定了。

  下面就是看整个的课程的评估。比如说院系某个学科,可能存在一些问题或者学生反映不好,需要再提高一下,他们就会到中心要求这样的评估服务。这样的评估服务也是分这样的三个过程,前期会谈,前期会谈跟刚才是一样,就是谈话、反复谈话,确定你这个的评估目标。你这个课程里面目前存在哪些问题,哪些地方是你希望改进的,就是获得一个基本的课程的信息。比如你这个课程,你的目标需要将学生培养达到什么样的水平?你根据学科的总目标,你设计了哪些相关课程,那么每一门课课程的目标是什么?这些基本的信息都是通过前期会谈所获得的。这里有一个案例,密西根大学环境与自然学院开了一个课程,就是关于景观建筑设计的,他们开了之后就到中心里面去要求做个评估,因为不知道这个课开的好不好,受不受学生欢迎,然后哪些地方需要改进。那么系主任来中心,通过谈下来知道,他来做这个评估服务的目标有三个,第一个目标因为这个课程是一个新开课程,他只知道我要让学生毕业之后达到可以做景观设计师这样的工作,那么具体的目标,其实他并不是很清楚,因此他希望中心帮助他,把这个课程课表清晰化;第二就是具体目标清楚以后,我要开哪些课,我每一门课的目标又是什么样的;第三点,我每一门课在课程体系里面,比如是第一学期上还是第二学期上还是第三,这个也是需要中心来帮助它,要形成一个很清晰这样的一个框架的

  接下来,大家可以想象下这个课程体系,收集的数据量非常庞大。比如这样一个新课程,他们有37门课,那么我要统计数据就是统计37门课的数据,而且我找老师谈话的话,至少是大于等于37个老师,因为有的时候一门课是几个老师一起上。所以说,它收集数据的过程做两年多,有做三年四年五年都有的,根据不同的专业情况来确定。收集数据主要有三个大的方面,第一个是根据我的目标设计方案并主持讨论。主要就是通过这样的三个方式:一个是个别谈话,找老师找学生;第二个是小组讨论,就是形成六到八人的小组,第三个就是做问卷调查。通过这样的方式获得的一些信息以后,第二件事情就是要把这个课程里面每一门课到底要干什么,要理清楚,也就是说获取该课程体系中每门课的简介。比如这个课程体系涉及到哪些内容,一门课对应的讲的内容是什么,把它找出来,然后你这门课培养学生的能力是学生的实验能力还是其他一些比如基于计算机的数据分析能力,把每一门课的信息都整理出来,这是非常复杂的一个工作。像刚才说的景观建筑设计师,我手头的这个表格就是关于你涉及到哪一个领域就是哪一个技能或者哪一个知识点,那第一个选项就是没有涉及,第二个选项就是仅仅跟学生介绍,第三选项就是让学生理解,第四个就是让学生会分析,会应用,第五个是学生能够掌握。因此,这儿有37门课就有37张这样的调查表,就是每一门课的老师都要做这样的自我评价,就是你这门课到底上什么。那中心之所以做这样的工作,就是要对课程体系所有的课到底讲什么,它的目标是什么得到一个很完整的了解。这个就是第二个过程,把每一门课的内容都搞的很清楚,你的目标是什么?

  搞的很清楚以后,第三个过程就是创建这个课程影射图。上午孙老师把它翻译成贡献图。我现在把所有的课程都收集来以后,比如说这是某一个院系,你要让他掌握哪些内容你设个目标,你想让学生达到哪些目标,你就列在这里。然后你要哪些课就来达到这个目标,每一门课针对这一个目标,你是简单的介绍一下还是强化训练,把每一门课都都列在这个树图里面,就是非常的清晰了。

  我们在前期会谈、数据收集工作完成后,就会开始组织反思会。这个反思会由院系来组织,中心协助,主要是把所有的上这个课的老师都集中一起讨论。首先,主管这个的教学院长会先介绍一下这个课程的目标是什么,根据我们的教学目标我们设置的哪些课,每一门课的目标又是什么,第一学期和其它学期分别上什么都给老师们介绍一下。因为37个老师,他可能每个人上一门课,但不一定很了解整个课程体系的情况。介绍完了以后,再由中心做评估的进行介绍:我们调查出来的庞大数据是什么样,课程术图也要拿出来跟老师一起讨论。因此这个反思会就有这样三个目标:一个目标就是重新确定该课程的教学目标第二就是根据教学目标重新审视每门课的开课次序,本来这门课是放在第一学期上,那一门课放在第二学期上,是不是秩序可以换一下,而放在第二学期上的课是不是可以放在第一学期来,因此主要是重新讨论这个开课的次序;第三个就是讨论制订改进的方案,中心根据老师们自己讨论出来的一些改进方案(中心不是专家,只有老师自己才是这个领域的专家)重新形成一个报告提交给院系,到这里为止,整个课程体系的评估就算是结束了。我的发言就这些,谢谢大家!

发言人:教学发展中心 熊锦副教授

2011年12月17日