(供试行参考)
新一轮审核评估采取线上评估与入校评估一体化设计,线上评估坚持目标导向全面把脉,入校评估坚持问题导向靶向开方,在工作流程上以问题清单为主线的“递进式”诊断聚焦贯穿其中,在工作模式上充分尊重专家组长统筹主导权和专家专业裁量权,不设规定动作、不设固定工作模式。线上评估与入校评估期间,主要通过专家组线上评估布置会、线上评估碰头会、线上评估总结会、入校评估布置会、入校评估碰头会、入校评估总结会、专家意见交流会,把住整个评估的进度和质量。
一、线上评估启动前
1.参加评估培训,把握新方案精髓要义。认真研读新一轮审核评估方案及工作指南、精要导读等配套文件,把握方案精髓要义和指标内涵。
2.熟悉评估系统,查阅学校评估材料。登录评估系统签订《承诺书》,查看系统使用手册,熟悉相关操作流程和要求;查看学校个性定制的评估指标体系(含自主选择的定量指标数据常模)、申请免评专业情况,初步查阅“1+3+3”等评估材料和支撑材料。
3.起草工作方案,做好评估各项准备。专家组长可组织召开组长、副组长、项管秘书召开预备会,商议形成本组线上评估与入校评估工作计划、任务安排,与学校协商起草《XX大学新一轮审核评估专家组线上评估与入校评估工作方案》(见附件1),做好专家组线上评估布置会准备工作,协调好评估与日常工作关系,为评估工作预留时间。
二、线上评估(2-4周)
1.参加学校线上评估启动会。会议由学校主导召开(如召开),出席人员、议程安排由学校与专家组协商议定,专家组长做好发言准备。
2.召开线上评估布置会。线上评估开始前,组长组织召开专家组线上评估布置会,对线上评估作出整体安排,明确工作任务,提出工作要求,交流指标内涵、线上评估流程、是否分工分组、是否召开中期碰头会等(相关会议议程可参考附件2)。
3.审读材料。线上评估第1周,一般是审读材料。专家登录评估系统,全面审读“1+3+3”评估材料、近三年学校本科教学质量报告和学校特色材料等,根据审读上述材料情况补充调阅需要进一步核查所需的材料。在全面审读查找问题基础上,通过重点审读查找出需要深究的问题,在评估系统中初步填写《专家个人线上评估意见》。
审读材料基本要求:一是全面系统,为被评高校精准画像。围绕高校自主选择的评估类型、评估指标和审核重点,认真对照一级指标和二级指标的内涵要求,全面分析、综合诊断,审核各项教育教学工作对评估指标的达成情况;重点关注高校是“怎么说的”、“怎么做的”、“做得怎么样”、“做的不好的如何改进”、“改进效果如何”等;从定性和定量两方面,全面了解被评高校的发展状况和教育教学工作,初步判断人才培养效果与培养目标的达成度、办学定位和人才培养目标与国家和区域经济社会发展需求的适应度、教师和教学资源条件的保障度、教学和质量保障体系运行的有效度、学生和社会用人单位的满意度的达成情况。二是问题导向,“开方”要对症,靶向精准;建议要针对性强、可操作。查找问题聚焦审核指标和重点内涵要求,深入查找,问题要明确,不能泛化和碎化,列出问题清单,找出影响学校发展和人才培养质量的根本问题,学校教育教学工作中存在但自评中没有反映的问题,上轮评估和专业认证中专家指出过但尚没有完成整改的问题等;诊断问题要有依据,对于依据不充分,不能明确定论的问题,需要进一步通过补充调阅材料或开展随机暗访、访谈等再给出结论。三是动态观念,关注高校教育教学状态的变化及发展趋势。关注专业调整情况及专业招生规模的变化情况,专任教师数量、教育教学经费、实验室设施条件和校内外实训基地、学生发展等状态数据的变化趋势等;对比《教学状态数据分析报告》、《就业数据分析报告》、《本科教学质量报告》以及相关支撑材料中的数据,分析学校质量保障措施是否发挥作用;重点关注对数据变化较大的相关指标,研读《自评报告》时,重点看在相应指标项上具体实施了哪些积极有效的措施,或哪些政策制度没有落实到位。四是个性差异,把握参评高校的特殊性和特色点。要把参评高校放在所处的社会环境中进行综合分析,把握参评高校所处的地域和经济发展环境的特殊性和特色点、学校所背靠的行业发展状况及对学校事业发展和人才培养工作的影响,包括经费支持、教师引进、生源质量和学生就业等;关注被评高校培养目标和社会需求的契合度,人才培养对社会的贡献度,给出符合学校实际的审核意见和切实有效的改进建议。
4.召开线上评估碰头会(非必须,也可在深度考察进行到一定阶段时召开,由专家组根据线上评估进展情况及工作需要灵活安排)。审读材料后,专家组可适时组织召开专家线上评估碰头会,讨论专家组通过审读材料发现的问题,统筹安排下一步通过听课看课、访谈座谈、补充调阅材料等方式进行深入考察求证的任务安排。
5.开展深度考察。专家组基于审读材料情况以及线上评估碰头会安排(如召开)开展深度考察。按照能够线上完成的工作不线下做的原则,专家组进一步深入开展听课看课、访谈座谈、调阅材料等线上考察活动。听课看课要提前了解基本情况,访谈要列好访谈提纲,座谈要控制好会议规模,一般不超过15人。专家组组长可根据线上评估工作需要,就近安排专家入校随机暗访。
深度考察有关要求:专家可紧扣“问题清单”求证需要,在评估系统中自主勾选听课看课、访谈座谈、调阅材料等具体考察方式和考察数量,不设“规定动作”;原则上专家组听课不少于30门、调阅课程试卷不少于30门、调阅毕业论文(设计)应至少覆盖15个专业。课堂教学评价表、试卷评价表、本科毕业论文(设计)评价表、访谈座谈工作记录表可选择填写,但如作为问题判断依据,则专家必须填写。线上评估期间,专家组须严格履行《承诺书》约定,尤其做好评估内容保密和信息安全工作,关于线上评估风险点的提示请见附件3。
6.提交《专家个人线上评估意见》。专家在坚持全面考察、有所侧重、充分讨论、独立判断基础上,在评估系统中提交《专家个人线上评估意见》,明确给出“句号”“问号”“破折号”及入校考察方式。专家组长、副组长根据计算机汇总和秘书整理情况,起草形成《专家组线上评估问题汇总表》(含入校问题清单及入校核查方式)。
7.召开线上评估总结会。组长组织召开专家组线上评估总结会,全面总结专家组线上评估工作情况。线上评估总结会承上启下,一是讨论确定专家组线上评估发现的问题,既要反复核查并确认线上评估已经坐实的问题,又要认真讨论并明确需要入校考察求证的存疑问题,讨论确定《专家组线上评估问题汇总表》。二是在前期与学校协商入校评估时间、天数等基础上征询专家入校评估意愿,商议入校评估人员初步考虑(5-9人),初步形成入校评估方案,重点确定《专家组入校评估问题清单》及考查方式、入校评估专家名单。三是初步讨论是否推荐“本科教育教学示范案例”。
线上评估总结会细节安排参考:会议前,项管秘书梳理问题清单,形成《专家组线上评估问题汇总表》草稿;请组长委派专家(副组长或评估经验丰富的专家)修改、完善形成《专家组线上评估问题汇总表》初稿;在组长、副组长全面审阅完善《专家组线上评估问题汇总表》基础上发送给专家组每位专家审阅,提示专家全面总结个人线上评估工作,做好线上评估总结会交流发言准备。会议中,可由副组长或参与评估意见梳理的专家介绍问题清单梳理情况,专家组成员按二级指标逐项审议问题清单,专家组组长总结线上评估整体情况,总结会议成果,安排前期参与梳理评估意见的专家代表根据会议情况,进一步修订《专家组线上评估问题汇总表》并定稿,专家组长将线上评估形成的问题汇总提前录入系统,安排起草专家组报告等工作。
梳理评估意见的有关提示:1.最好由副组长带队梳理,参加梳理意见的专家,建议要有分管教学的副校长、教务处处长。2.梳理形成的问题表述要尊重专家个人的线上意见原义,形成的入校待核查的问题要有出处(这要求专家在填写个人线上意见时就要做到落笔有出处),尽量少做加工提炼。
三、入校评估(2-4天)
1.做好入校评估准备。入校评估前,与学校充分沟通确定入校评估方案(含入校考察人数、天数、环节和重点考察内容),协商确定是否召开入校评估说明会。入校评估专家组全体成员应在正式考察前1天,在入校评估布置会之前抵达参评高校。
2.召开入校评估布置会。组长组织召开入校专家组评估布置会,确定入校评估考察任务分工和日程安排等,提出工作要求。一是根据入校评估方案“专家组入校评估问题清单”,可由副组长牵头温习每项指标的问题表述;二是每位专家依据指标进行分工(入校前可征询专家组副组长意见初步分工),明确需求证的问题、入校重点核查以及核查方式,并明确每项考察任务需要访谈、走访的部门及学院、基地等;三是专家根据所负责的考察任务填写“专家个人考察行程安排表”和《专家个人入校问题核查表》,秘书做好协调安排和对接学校。四是组长根据布置会安排,在评估系统中将专家负责考察的任务进行分配,提醒专家(根据《专家个人入校问题核查表》)在系统中及时填写问题核查情况及改进建议。
入校评估必做内容:线上评估无法开展或没有进行的内容和环节;线上评估存疑问题;入校评估方案中重点考查内容和环节;选做内容:入校评估说明会、专家意见交流会——专家组组长与参评高校协商决定;入校评估方案中专家没有列入的考察内容,若被评高校需要,在评估时间和任务许可的情况下可适度安排;免评内容:已通过教育部认证(评估)并在有效期内的专业、线上评估已经完成的内容和环节,免于评估考查。
3.参加入校评估说明会。如召开入校评估说明会,会议由学校视评估工作需要主导召开。如不召开入校评估说明会,专家组组长副组长可在入校评估第一天上午,与学校书记校长及主要职能部门领导就线上评估情况及问题进行小范围交流,同时听取学校对专家入校评估的需求。
4.深入开展入校核查。入校专家紧扣《专家个人入校问题核查表》,按计划和要求采取灵活多样的方法手段开展现场核查工作,对带有“问号”“破折号”的评估指标进一步求证,深度考察学校是否有值得推荐的“本科教育教学示范案例”。
5.召开入校评估总结会。讨论确定专家组入校考察总体情况,对线上评估的“问号”“破折号”问题划句号,给出明确判定意见,议定“问题清单”;讨论评估意见交流会(如召开)专家组及专家个人发言内容;安排撰写《专家组审核评估报告》;议定是否推荐“本科教育教学示范案例”及推荐材料撰稿专家。
6.参加专家意见交流会。学校主导,与专家组协商。专家组长发言15-20分钟,讲本科教育教学成效和存在的问题;专家个人发言每人8分钟,只讲问题。
7.提交评估报告。离校后,专家组长会同副组长完成写实性《专家组审核评估报告》初稿(含问题清单)、示范案例初稿(如推荐),在征求专家组成员意见基础上完善并定稿,入校评估结束后4周内在系统提交《专家组审核评估报告》(含问题清单)、示范案例。