高校实验室项目生命周期评估体系构建与应用

2021-05-28 07:05宋梦岚
绥化学院学报 2021年5期
关键词:指标体系实验室评估

宋梦岚

(安徽三联学院财会学院 安徽合肥 230601)

一、高校实验室项目生命周期与评估

生命周期的概念应用很广泛,在生理学上主要是指人的生命周期,是指他的出生、成长过程、衰老、生病和死亡的过程。[1]项目评估是指由专门机构和人员,根据相关法律法规、技术参数、条件等,对项目的必要性、工程技术、经济社会效益等进行分析、论证和评价,给出评估结论,为项目决策提供科学依据的一项技术性活动。[2]高校实验室项目从提出项目方案开始至项目废弃清除,一般会历经项目立项、项目定义与决策、项目设计与计划、项目实施/控制、项目完工与交付、项目投入运营等生命周期阶段,需要分别开展项目前评估、跟踪评估和后评估。[3]

高校实验室项目评估,必须根据国家高等教育法律法规和方针政策以及高等教育改革发展方向、区域经济社会和行业推进高等教育发展的要求,参照高校实验室建设与评估相关体系和标准,如《高校实验室工作规程》《高等学校基础课教学实验室评估标准》《高等学校专业实验室评估标准》等制度文件,结合高校自身特点和要求,建立自身的实验室项目评估体系,全面、系统、客观地对实验室项目进行评估。[4-5]

二、高校实验室项目前评估

(一)内容与流程。高校实验室项目前评估,也可称之为项目论证与评估,是在项目前期立项、定义与决策阶段,从项目全局出发,根据经济技术、市场运行条件和发展需要等,对项目及其备选方案所进行的系统评估,进而对项目及其备选方案的可行性和优劣程度进行判断,决定其取舍。高校实验室项目前评估是减少甚至避免盲目和错误实验室项目投资决策的根本方法,是各种项目论证与评估中首要的项目论证与评估工作。

高校实验室项目前评估由项目需求部门提出申请,报送项目申请书和可行性研究报告等材料,由实验室项目主管部门组织实施,组建评估专家组,教务、质量管理等职能部门可共同参与。高校实验室项目前评估分两个循环,一是项目批准立项前的初步可行性研究循环,二为可行性报告的批复与项目投资决策的研究循环。

(二)指标体系。根据评估内容和工作流程,高校实验室项目前评估共设置6个一级指标,18个二级指标,指标体系如表1所示。

表1 高校实验室项目前评估指标体系

(三)指标应用。高校实验室项目的前评估是一项综合性的技术经济工作。评估的拟建项目是否可以立项和开工建设,由评估专家组对项目的必要性、基础条件、项目方案和技术标准、资金估算与筹集、社会效益、经济效益等6个一级指标18个二级指标进行分析和评价,每个二级指标分A、B、C、D四个评估等级,评估组专家对照评估内容和条件经集体讨论后确定各二级指标的等级。最终评估结果状态方程如下:

其中A、B、C、D分别表示得四个等级二级指标数,a、b、c、d分别表示评估结果为A、B、C、D四个等级的权重系数之和。

评估结果分为合格和不合格两种,合格需同时符合下列三条标准:

(1)没有二级指标评估等级为D,即D=0;

(2)一级指标体系中项目必要性、社会效益、经济效益所对应的二级指标评估等级均为C以上,即C=0且D=0;

(3)A≥13,B≤7,C=0;或A≥16,B≥2,C≤2。

同一项目多个方案评估合格,则按状态方程比较和判优。

三、高校实验室项目跟踪评估

(一)内容与流程。高校实验室项目作出起始决策之后,进入项目实施阶段。在项目实施过程中,项目管理者需要及时了解项目的实施和整体情况,这就需要进行项目跟踪评估。项目跟踪评估包括两个方面,即跟踪与评估。其中,跟踪是指对项目的实施情况、资源使用情况以及项目实施中各种变化和引起的各种环境的变化等方面的信息收集;评估是指对照项目计划与设计,对项目实际实施情况以及随着项目实施而造成的各种变化的全面评估。

高校实验室项目跟踪评估一般由项目所在单位负责组织实施,项目主管部门负责业务指导和监督,评估结果报主管部门备案,作为项目结题验收的依据和资料,如有必要也可以由主管部门组织实施。高校实验室项目跟踪评估主要涉及到四个方面:其一是项目实施情况的评估;其二是项目环境的发展变化情况的评估;三是项目变更方案的评估;四是项目变更后新项目的全面评估。这四个方面的评估工作并非每个项目跟踪评估必须完成,而应根据实际情况有所取舍。当项目实施情况与项目计划安排相对比较一致的时候,项目变更和变更后新项目的全面评估就不必开展。

(二)指标体系。根据评估内容和工作流程,高校实验室项目跟踪评估共设置4个一级指标,12个二级指标,指标体系如表2所示。

表2 高校实验室项目跟踪评估指标体系

(三)指标应用。高校实验室项目跟踪评估由评估小组对4个一级指标12个二级指标进行分析和评价,每个二级指标分A、B、C、D四个评估等级,评估组专家对照评估内容和条件经集体讨论后确定各二级指标的等级。

首先,评估小组判断项目变更情况。若有变更,先进行项目变更评估,评估结果要求C=0且D=0,否则暂停项目计划,限期整改,若整改后达不到要求将考虑撤销项目。

在项目无变更或变更评估合格情况下,对其他10个二级指标进行评估,评估结果处理如下:

(1)当D>0或D=0但C≥4,将考虑撤销项目;

(2)当D=0且0<C<4,提出项目警示,限期整改,整改后达不到要求将考虑撤销项目;

(3)当C=0且D=0时,评估结论合格。

四、高校实验室项目后评估

(一)内容与流程。高校实验室项目后评估是指对已经完成的项目的目的、执行过程、效益、作用、影响以及已完成项目的前评估和项目决策所进行的系统的客观分析与评价。项目在投入运营一段时间以后,项目决策和实施已成定局,项目后评估对项目本身并没有太多的意义。但是,可以通过项目后评估的实施,发现项目运行过程中出现的问题,检验项目预期目标的实现程度,确定项目是否成功并找到相应原因,为该项目后续运营提出改进建议,提高项目科学决策和管理水平,为后期类似项目的建设提供依据。

一般高校实验室项目都实行两级管理体制:主管部门和项目所在单位,分别进行跟踪监督后评估和自我检查后评估。高校实验室项目后评估主要涉及三个方面:第一是项目前评估和项目初始与跟踪决策的评估,主要是检验前期决策;第二是项目未来可持续发展的评估,为项目未来发展服务;第三是项目对于社会和环境的影响与危害的全面评估,主要是消除项目负面影响。

(二)指标体系。高校实验室项目后评估工作流程和内容比较复杂,根据层次分析法模型,共设置5个一级指标,25个二级指标,指标体系设计如表3所示。

表3 高校实验室项目后评估指标体系

一级指标序号 指标内容二级指标序号 指标内容B2实验教学B3实验队伍B4仪器设备B5环境与安全C21 C22 C23 C31 C32 C33 C34 C35 C36 C37 C41 C42 C43 C44 C45 C51 C52 C53 C54 C55教学任务教材大纲与指导书实验项目管理实验室主任专职人员实验指导教师人员结构岗位职责人员培训人员考核仪器设备配置仪器设备管理低值易耗品管理仪器设备维护与更新仪器设备完好率设施与环境学生实验用房安全措施环境保护整洁卫生

(三)指标应用。高校实验室项目后评估指标体系的应用,首先需要确定指标权重,可采用群组层次分析模型。[7]首先,应用数字1-9及其倒数作为标度构建判断矩阵;其次,计算层次单排序及一致性检验;最后,计算层次总排序及一致性检验。过程如下:

则判断矩阵一致性指标CI为:

查找相应的平均随机一致性指标RI,计算一致性比率CR为:

一般情况下,一阶、二阶判断矩阵CR=0,不需要进行检验。对于三阶及以上的判断矩阵,当CR<0.1时,一致性可以接受;当CR≥0.1时,偏离一致性程度过大,需要适当修正,直到满意为止。

最后,计算层次总排序及一致性检验。

假设层次B有m个元素B1,B2,...,Bm,其总层次权重分别为W1,W2,...,Wm;层次C有n个元素C1,C2,...,Cn,对于上一层次元素Bj的层次单排序权重为W1j,W2j,...,Wnj,相对于总目标的总排序为:

总一致性检验为:

指标权重确定后,可以对项目后评估指标进行综合评价:

首先,进行单因素综合评判。

设:U={u1,u2,...,um},Ui=(i=1,2,...,m)为评判指标体系;V={v1,v2,...,vm},Vi=(i=1,2,...,m)为评价集;A={a1,a2,...,am}为权重分配向量。建立模糊综合评价矩阵R,通过A与R模糊变换得到模糊评判集B:

其中◦为综合评判合成算子,有四种类型:M(∨,∧)算子,M(·,∨)算子,M(∧,⊕)算子和M(·,+ )算子。

得出综合评判分值M,主要方法有两种。

最大隶属原则:

模糊向量单值化:

先给评语集赋值得F=(f1,f2,...,fn)

其中k为待定系数,一般取1或2。

其次,进行多级综合评估。

高校实验室项目后评估指标体系目标层、准则层和方案层共5个一级指标,25个二级指标,是一个多因素多层次的指标体系,其多级模糊综合评判模型如图1所示。

图1 高校实验室项目后评估模糊综合评判过程

五、结语

通过高校实验室项目生命周期评估活动,将实验室项目评估从一种被动的考评检查转化成一种主动的实验室项目常规管理的手段,增强了高校的自我质量控制意识和风险控制意识,建立起高校实验室项目评估的长效机制,使实验室项目评估与教学质量管理保障相互融合,达到“评”与“建”相结合。本文构建的评估指标体系,综合运用了问卷调查、德尔菲、层次分析以及模糊综合评价的方法,并借助统计分析工具,提高了评估指标体系及其权重分配的科学性和准确性。但德尔菲法、群组层次分析法等方法,本质上都属于主观赋权法,存在着主观赋权法所固有的不足,此项工作质量的提高有待于专家库建设。

猜你喜欢
指标体系实验室评估
2022城市商业魅力指标体系
第四代评估理论对我国学科评估的启示
网络空间攻防对联合作战体系支援度评估指标体系构建
电竞实验室
电竞实验室
电竞实验室
电竞实验室
层次分析法在生态系统健康评价指标体系中的应用
供给侧改革指标体系初探
评估依据