3 谈谈本科教学审核评估自评报告的撰写 一个外部质量保障机构管理者的观点.pdf

上海教育评估研究 Shanghai Journal of Educational Evaluation 第3期 2018 年 6 月 No. 3 Jun. 2018 谈谈本科教学审核评估自评报告的撰写 —— — 一个外部质量保障机构管理者的观点 孟 洁 （上海市教育评估院高等教育评估所， 上海 200031） 1 摘要：自评报告是本科教学审核评估过程中的一个重要环节，是为了让高校、专家围绕审核要 “品质 素和五个度的评价对学校的本科教学水平和效果做出自我判断和专家判断的重要依据。只有 亦真，态度也诚”的报告才能让学校教职员工了解学校发展成就、发展目标、发展态势和发展瓶颈， 才能让专家了解和分析参评学校的全貌、大致问题和症状、急需着力解决的关键，为学校今后的发 阐述自评报告撰写、 修订、使用等构 展诊断、把脉和开方。本文以外部评估机构项目管理员的视角， 建性过程方面的一些经验和思考。 关键词：高等教育； 本科教学； 审核评估； 自评报告 中图分类号： G40-058.1 文献标识码：A 文章编号： 2095-3380（2018）03-0015-05 DOI:10.13794/j.cnki.shjee.2018.0035 1 A Talk on the Writing of Self-assessment Report of Undergraduate Teaching Evaluation —A Perspective of External Quality Assurance Agency Manager Meng Jie （Department of Higher Education， Shanghai Education Evaluation Institute, Shanghai 200031） Abstract: Self-assessment report is an important part of the audit evaluation process for a university, it can let the university and experts focus on the evaluation of the audit elements and the five degrees, make self judgment and experts' judgment for the undergraduate teaching level and effect of the university . Only "true disposition" self-assessment report will enable faculty members to understand university development achievements, development goals, development trends and development bottlenecks, enable experts to understand and analyze the full picture of the participating university, including critical symptoms and questions, enable experts to diagnose for the future development of the university. Some reflections on the constructive process of writing, revising and using self-assessment reports are put forward by the perspective of managers of external quality assurance agencies. Keywords: Higher education; Undergraduate teaching； Audit evaluation； Self-evaluation Report 收稿日期：2018-03-07，修回日期： 2018-04-19 · 16 · 上海教育评估研究 2018 年，第一轮本科教学审核评估工作即将结 2018 年 6 月 而自评报告的撰写是重要的第一步。 束。越来越多的参加审核的专家体会到自评报告的 构建一个符合学校自评自建目标和特点，兼顾审 撰写是审核评估的基础，作者从一个外部质量保障 核评估要素的自评报告框架，并将具体的案例、数据 机构的管理人员视角，来审视本科教育审核评估自 和分析、问题的深度查找等融入其中，形成一个真性 评报告的撰写。 情的自评报告，需要从多个方面考虑，以下就这些方 “真性情”在百度上的解释是“对人待事，有自己 独特的风格，不加掩饰，用自己的真实感情去为人处 世，始终如一”。用“真性情”在百度上搜索，可以找到 很多内容，遍及方方面面，可见“真性情”得到人们普 面谈谈项目管理工作者的看法。 一、 “真性情” 的自评报告来自于对上海 本科教学审核模式要求和特点的把握 遍的推崇。用“真性情”写作，就是要“不做作、不矫 David 认为“审核是一种由外部推动的对于内部 情、不掩饰、不虚构”。这种态度正好是高校在审核评 质量保证、评估和改进系统的同行评议” 。 ［1 ］教育部 估中自查需要的态度，因此也是撰写“自查报告”提 在部署本科教学审核评估时充分融合了第四代教育 倡的态度。 评估的互动协商、 以外促内的理念。 推及审核评估领域， “真性情”的本科教学审核评 1. 审核评估的目的 估自评报告（以下简称自评报告）特指内容真实完善、 审核评估是“促使学校将不断提高人才培养质量 分析总结到位、诚心反思求解的学校总结。自评报告 作为办学的优先事项；明确校内各级管理人员和教 是参评高校对高校自身定位、培养目标、理念措施、培 师、学生在提高人才培养上的责任；促进校内各部门 养效果、存在问题的全面总结，是高校自我评估结果 在改进人才培养工作方面展开积极的讨论与合作；在 的集中体现。它不仅反映了参评高校对自身教学工作 校内和学校间提供最佳的提高人才培养质量实践的 和水平的认识，也反映了参评高校对审核评估工作的 。［2 ］与其他的评估不同， 审核自评报告要围绕人 信息” 态度和认识。高校的自评报告也是让参加审核评估的 才培养主线展开。 专家对该高校取得第一印象的重要材料，同时它也能 2. 审核评估质量水平判断依据 让专家了解该学校对于这次审核评估所持的态度甚 文［3］在综述国际上审核评估的趋势时，引用了 至立场。因此，高校需要在做好自我评估和教学基本 原斯坦福大学副校长 William 的观点， William 认为审 状态数据采集的基础上，认真研究、总结凝练，恰如其 核评估提高教育质量的五个要素： “审核的参与者必 分地撰写。 须确定高校教育的潜在目标，决定想要的学习结果； 在上海市属高校实施本科教学工作审核评估过 审核应当决定课程是否达到了教育目的；审核参与 程中，相关学校花大力气撰写了自评报告，这些报告 者必须考虑教和学的过程的设计和组织；如何评价学 非常关注审核项目和质量标准在学校特色和上海特 生的学习；最后，审核强调教职工是否传递了他们想 色中的体现，突出了审核评估中充分尊重高校办学自 要传达的内容、持续地采用合适的教学方式和有效地 主权，支持高校办学特色多样化的初衷，以及学校为 ［3 ］ 进行评价和测量结果。” 此而付出的努力。专家在对部分高校自评报告的审读 教育部高等教育教学评估中心提出评估重点为 中也认为：一是自评报告撰写质量和水平一定程度上 “办学定位和人才培养目标与国家和区域经济社会发 体现了学校内部质量保障体系的能力和水平；二是高 展需求的适应度，教师和教学资源条件的保障度，教 校的内部质量保障机构的水平还存在差异。针对这一 学和质量保障体系运行的有效度，学生和社会用人单 情况，作为外部质量管理机构的管理人员，通过对上 位的满意度” 。［4 ］后续， 在此基础上进一步提出五个度 海市已完成审核评估高校的自评报告进行审读和分 的质量评价：办学定位和人才培养目标和社会需求的 析，越来越意识到，尽管各校审核评估项目以及审核 适应度、学校人才培养目标和培养效果的达成度、教 方案略有不同，自评报告也有不同特色，审核项目也 师和教学资源对人才培养的支撑度、教学和质量保证 有一定的开放性，但希望发挥审核评估的效果，助推 体系运行的有效度、学生和用人单位的满意度（图 1）。 学校发展，各校在自评报告撰写、互动修正及审核反 而五个度的达成情况到底如何去表现和落实，首先需 馈过程的态度、形式和细节的把握，还是至关重要的， 要每个学校想清楚、说清楚在“用自己的尺子”量自己 2018 年第 3 期 孟洁： 谈谈本科教学审核评估自评报告的撰写—— — 一个外部质量保障机构管理者的观点 · 17 · 时，每把尺子的刻度定在哪里？即首先讲清学校的办 基于部、市属院校的管理隶属性质的不同，在实 学定位、人才培养目标。这是“学校结合国家需求、自 践操作中，由省级外部质量保障机构来协助专家和 身条件和发展目标确定的衡量人才培养质量的一把 高校评估管理人员，一是为了服务、配合专家的审核 总尺子，规定了学校各专业人才的共同底色、培养路 工作，帮助专家检视不同学校审核方案和标准，更加 径、人才类型以及在知识能力和素质方面的共同规格 高效、平稳开展本科教学工作审核评估；二是为了帮 要求，是学校教育教学的工作总引领，围绕目标，学校 助内部质量保障完善程度不高的高校，通过自我评 配置各类资源、组织各专业制定培养方案，这样培养 估，特别是自评报告的撰写、修正、反馈等措施，帮助 的人才才具有特色和不可替代性” 。 其次， 对于社会 自己检视自我评估的问题和流程，建立更加有效的 适应度可以总结出三个方面： “第一，你的定位从哪儿 自我评价机制，体现更加专业的质量保障能力。外部 来，依据是什么；第二，你确定这个定位的过程是怎样 机构前期的培训和适当介入，提供一些咨询、互动式 的； 第三， 利益相关者是否认同。” 比如说明办学定 技术和流程服务，可以帮助学校更好地开展自评和 位是否做过社会调查，是否了解过全国同类型的学校 报告撰写。 ［5 ］ ［6 ］ 情况，学校瞄准哪些行业或领域来设置学科专业，这 作为体现学校自律能力和保障结果的自评报告， 些领域的社会需求和竞争对手情况如何？是否听取过 其撰写者必须始终把握审核评估的宗旨和特点，依靠 国内外专家的意见，讨论和决策的程序是否民主？这 自身的力量、结合专家和协助者的智慧，才能呈现一 些可以体现在自评报告中。由此类推其他几个度。总 个高质量的、真性情的自评报告，为专家的诊断把脉 之，一些高校尝试在自评报告中就六个层面、五个度 奠定良好的基础。 的评价进行总结和提升。 二、 “真性情” 的自评报告来自于高校 管理者评估制度整体设计， 来自学校 自主开展自我评估过程 2013 年 12 月，教育部有关文件规定对参加并通 过首轮评估的 589 所高校开展审核评估。［7 ］上海市教 委在遵循和对接教育部的审核评估模式和开放性的 指标要素的要求下，结合上海实际，增加了上海审核 图 1“五个度” 概念体系［4 ］ 评估的“5+5”要素设计，并在颁布的文件中规定高校 3. 审核评估最重要的特点 须在完成先期的专业自主评估的基础上，启动本科教 由于审核评估模式相对更为尊重学校办学自主 学审核评估。这一整体设计不仅努力探索上海模式， 权，更为重视评估专家组与被评学校之间的平等互 更着眼于使学校通过专业自主评估从点到面加深对 动，针对的是学校内部质量保证机制，而非具体的教 审核评估的特点认识，提高自评报告撰写人员的相关 学人员，且注重发挥专家咨询和建构学校自律的进 素养、实践能力，因为专业评估不但为学校积累了评 程。在审核过程中，学校或学科应该选出在教学上有 估经验， 而且为自评报告的撰写提供了素材。同时， 随 典范，好分享的经验，促进其他教师的教学水平的提 着审核工作的开展，推动学校更好地设计自我评价过 高。因而审核模式具有“校正”特质和“自我”样板，其 程和结论形成路径、责任组织依托、框架形式的确定 内涵体现了第四代协商共建式评估的特点：即评估是 以及数据支撑。 所有参与评估活动的人们，特别是评估者与其对象双 自评报告是学校对自我评估结果的客观反映，一 方交互作用、 共同建构统一共识的过程。因此， 在评估 定要在扎实的内部自我评估路径基础上撰写完成。自 实践中较少引起争议，较易被高教界接受。但对学校 评本身是一个自查自纠的过程，自评报告只是在整个 质量保障的主体意识和能力要求很高，要求学校具有 自评过程中最后形成的一个报告，就相当于论文研究 足够的自律能力，且学校相关利益人要共同关注审核 成果的最终展现。自评过程和写报告过程两者不能混 的过程。 淆,不能为报告而报告,只搭建写作班子, 进行很多构 · 18 · 上海教育评估研究 2018 年 6 月 思、材料的组合和框架的调整而忽略了自评的作用。 有利于学校职工关心学校的发展，发挥主人翁精神， 应该在结果呈现之前，对照评估各方面的要求设计自 增强对办学效益和办学水平及对策途径的共识。对 评方案，对学校的整体工作进行梳理，查找学校存在 发现问题、提出建设性建议并被评建工作采纳的员 的问题， 检查自身的工作。 工要有激励机制，唯有建立这样的沟通反馈机制，才 2012 年由上海市教育评估院组织成立“专业自主 评估工作委员会”课题组，帮助学校制定自主评估工 能调动起各部门自我激励、自我超越的精神，发挥出 以评促建的作用。 作方案，研制学校自主评估手册、并推出专家工作指 学校的自评报告应在内容和形式上满足审核评 南和学科专业自主评估标准，提出了专业自评报告的 估框架的要求，它是学校内部审核结果的总结与提 一些要求，及时推进了上海高校学科专业内涵建设自 炼。自评报告要求 8 万字以内，解剖问题篇幅占三分 主评估，为下一步高校开展内部审核奠定了良好的基 之一，细致做法不是要重复铺陈每个审核项目的每 础，只有通过五年一轮覆盖学校全专业的评估，让评 一点要素，而应说明学校在该项工作上所确立的目 估的概念深入到高校管理者和教职员工每天的日常 标、实现目标的措施与步骤、取得的主要成效、存在 工作中，早发现问题早自查改进，才能充分发挥后续 的主要问题、产生问题的原因以及改进策略等。“理 审核评估对学校全方位的自我矫正功效的审核，而不 ［8 ］ 念要到位， 事实做支撑， 优势须找准， 问题要写透。” 自 是仅仅依赖一次评估几个专家某个评估结论，这些专 评报告要求能反映出学校自身特有的品质，不是套 业自评中生动的案例和分析数据有一些经整合后纳 用别校模板的报告，学校要有自己的办学理念和人 入了审核评估自评报告中。 才培养理念，这些特点必须用语言呈现出来并佐以 自评报告涉及跨部门合作，为了保证自评报告的 实例说明。对学校在办学过程中取得的成绩需要认 顺利撰写，一般学校质量管理部门会事先具体说明涉 真、客观地整理，并不是将所有的优点都写全，要有 及的审核要素项目、数据报表、支撑材料，任务分解落 所取舍。自评报告无论是成绩还是问题都要有翔实 实到相关责任部门，自评分析落实到具体责任组织和 数据和事实支撑，即“成绩与问题的描述方式要一致, 责任人身上。一般来说，自评报告的撰写和定稿涉及 成绩与问题的举证有定量和定性分析,分析成绩和问 两个层面的组织：一是评建工作领导小组，负责学校 ［8 ］ 题的产生内外因相结合”， 不回避问题，不隐瞒事 评建工作的领导、组织实施和报告的审查、进度监督 实，不夸大成绩，不弄虚作假。 和修订; 二是常设的质量保障与监控机构与相关职能 部门，具体负责评估报告的框架内容研究和分析、责 任计划的分解、撰写人员的组织协调、材料汇总的校 对等工作。 三、 “真性情” 的自评报告来自前期指导 阶段的助推， 来自对自评报告互动、 修订及反馈的细节把控 在跨部门的协作过程中，在校内建立起自下而上 和自上而下的双向反馈评价机制。一般可通过问题 上海市教育评估院在教育部关于审核评估程序 的形式来指导内部自我评估和报告的撰写。例如，针 基础上，借鉴工程教育认证的有关做法，增加了“自评 对学校总体教学工作效果的问题有:学校哪些方面质 工作指导”阶段：分为前期指导（一阶段）、前期指导 量最强，哪些方面较弱?结论是如何得出的?针对核心 （二阶段）， 指导和帮助学校改进自评工作。 领域的工作绩效问题有: 核心领域的工作完成得怎 在前期指导（一阶段）包括：①召开由市教委、学 样?哪些方面需要改进?针对对策方案的问题有:在专 校领导和有关部处、相关专家及兄弟院校参加的启动 业和审核评估的过程中有过哪些具体的改进质量的 会，标志着上海市属高校自我评估筹备成熟，审核评 想法?它们可能会产生哪些影响? 针对质量改进的问 估正式启动；②学校研讨《自评报告》撰写框架，提请 题有:明年学校打算做什么?等等。在自我提问、自我 专家对《自评报告》初稿提出修改建议；③理清状态数 反思的基础上，可分析凝练自评报告，并附上相应的 据填报中的问题，明确解决途径；④完善上海市属高 佐证，报告侧重的是问题和不足以及改进和提高的 校审核评估方案中新增要素对应数据采集及分析要 方法与目标。另外评估报告要尽可能全员知晓、公布 求；⑤商定前期指导（二阶段）工作方案，提请专家委 在学校内部平台上，并提请教职工审阅、批评指正， 员会认定。 2018 年第 3 期 孟洁： 谈谈本科教学审核评估自评报告的撰写—— — 一个外部质量保障机构管理者的观点 · 19 · 前期指导（二阶段）指导的工作细节包括：①专家 性，在前期指导阶段，学校内部质量机构也是一个学 审议学校修改后的《自评报告（送审稿）》，学校修订定 习和增强保障能力的过程。自评报告的撰写及完善也 稿后上传平台；②审议学校修改后的《大学状态数据 是确定学校教学质量管理体系完整性与有效性的关 分析报告（送审稿）》；③商定专家集中进校阶段的工 键，同时还是专家今后撰写《审核评估报告》的主要信 作方案。④完成关于对某大学审核评估自评工作审议 息来源。 市教委和专家组。 的意见， 并协商学校后,报告教育部、 总之，审核评估以新的模式出现，提出了评估新 通过专家委员会与学校及院系领导、职能部门的 思路和专家审核考察新技术的新要求，需要外部机构 前期两次集体互动、集中协商，在这 2-3 天讨论基础 加强研究的力度。本文只针对其中的一个环节，梳理 上，通过开诚布公的面对面沟通，以及对证据、数据的 了上海市高校自评报告的撰写、反馈和使用中的细节 质疑和探讨，使专家对学校在自评报告中所阐述的办 和流程。 学目标、学校教学状态、围绕审核项目和重点开展的 当然，何为“真性情”的自评报告可能很难界定， 自评工作以及取得的成效有充分了解；同时，学校的 但可以肯定的是，它绝不是学校各部门上报材料的汇 汇报、解释和讨论过程也使专家更加深入地了解学校 总，不是千校一面的套用模式报告，不是成绩和数据 目标定位，避免专家对问题的主观判断，也方便了专 的堆砌，不是对审核指标的平铺说明，不是问题和诉 家把握好后期实地考察的重点、计划与进度。通过第 本文可归纳为： 一 苦。如果一定要有个概括性的说明， 一手的考察取证，在后续观察、测量、试验或其他手段 个真性情的自评报告应体现组织自评的关键程序和 所获事实的基础上，专家可以不受情绪和偏见左右， 质量保障闭环意识；一个真性情的自评报告应反映出 以可以阐述和记录的、可以定量或定性判断的角度去 驾驭和反思学校发展水平的自省能力；一个真性情的 选择角度，验证早先对办学质量的判断，掌握实际情 自评报告应贵在内容精准、结论自证、画像要像；一个 况，获得更多有关学校本科教学的实际状况的信息， 真性情的自评报告既符合审核要素的基本要求，又体 评价质量管理体系实现质量目标的适合性与可信性， 现特色及风格。 最终专家有针对性地提出策略和建议，为形成专家初 步的审核意见奠定基础。 参考文献 另一方面，两期指导助推了自评报告的完善，使 ［1］ David D. Dill，William F. Massy，Peter R. Williams. 专家组的智慧可以吸纳到自评报告中，专家们对学校 Accreditation & Academic Quality Assurance: Can We 自评报告（第一版、第二版）不仅提出了一些细节性、 Get There from Here?［J］.Change，1996（5）： 16-24. 个性化的建议，还对自评报告提出了共识性的、建设 性的建议，如：①自评报告在按审核评估的项目和要 素进行撰写的同时，将“五个度”的评价融入其中；② 自评报告应坚持写实，自评结论注意用事实和数据支 撑；③针对上一轮本科教学工作水平评估的专家意见 进行整改的情况；④重点研制上海新增和修改的“5+ ［2］ Dill， David D. Is there an academic audit in your future?［J］. Change the Magazine of Higher Learning， 2000（4）： 35-41. ［3］ 刘海兰.本科教学审核评估的有效性研究［J.］江西社会 科学，2014（4）:236-239. ［4］ 王铭.我国高等教育质量标准“五个度”的分析、评价与 操作化研究［J］.高教探索， 2016（11）:22-24. 5”要点的数据表征形式和采集方式，探索可推广、可 ［5］ 王慧.查找问题求精准［J］. 麦克思研究， 2018（4）： 29. 复制的数据表征表。 ［6］ 周 玥 .自评重点在 “神”不在 “形” ［J］.麦克思研究， 在两期的指导过程中，一方面专家要指导学校抓 2018（4）： 27. 准未解决的问题，凝练专家智慧，提出评估报告下一 ［7］ 教育部关于开展普通高等学校本科教学工作审核评估 步要提高的目标和对策。另一方面，学校也要客观清 的通知［EB/OL］（ . 2013-12-12）. http://www.moe.gov.cn/ 醒、实事求是地接受各类反馈意见，并有则改之，无则 srcsite/A08/s7056/201312/t20131212_160919.html. 加勉，其实自评过程中，反省心和学习自纠精神比报 ［8］ 教育部高等教育教学评估中心. 普通高等学校本科教 告起初撰写得好坏更为重要。 基于自评报告的水平反映了学校教学质量管理 体系的水平，为了实现学校质量目标的适合性与可信 学工作审核评估工作指南［M］.北京：教育科学出版社， 2014： 117-118.