水利科技成果评价指标体系构建及应用

袁　杰,袁汝华

(河海大学　a.商学院；b.水利经济研究所,南京　210000)



水利科技成果评价指标体系构建及应用

袁杰a,袁汝华b

(河海大学a.商学院；b.水利经济研究所,南京210000)

摘要：基于指标设定原则，运用SPSS对水利部项目《水利科技及贡献率分析研究》的相关调研数据进行分析，构建水利科技成果价值评价指标体系。最后采用层次分析法和模糊综合评价对水利科技成果价值进行定量分析，以期为水利科技成果价值评价提供一种可行的科学方法。

关键词：水利科技成果；评价指标体系；层次分析法；模糊综合评价

2011年中央一号文件《中共中央国务院关于加快水利改革发展的决定》颁布，在新的形势下明确了水利的战略定位，提出加快水利改革发展的指导思想、目标、任务、基本原则[1]。在水利工程建设和水利事业管理中，无论是水科学的基础研究、工程技术方法创新和应用，还是现代管理体制创新与改革，都离不开水利科技的进步。而水利科技成果又是水利科技发展的核心部分。一个科学、简明、系统、合理的水利科技成果评价指标体系的建立是水利科技成果价值评估的重要基础和前提。因此，为了明确水利科技成果价值，对水利科技成果评价指标体系进行系统和深入的研究是非常重要的。

随着技术进步和技术改造进程的加快，国内学者在科技成果评估方面已经作了很多研究。王文华[2]对技术经济效益的评价指标体系进行研究，将评价指标分为绝对和相对经济效益评价指标，并对各指标的计算方法进行具体分析。董宏林等[3]构建了农业的基础研究成果、应用研究成果和技术推广成果的评价指标体系，同时提出“从现在认识过去”的方法来检验农业科技成果评价指标体系可靠性，为农业科技成果的分类评价提供了技术和方法。刘如顺等[4]研究了海洋应用类科技成果的评价指标和评价方法，对海洋应用类科技成果考核指标的具体设计和评估方法机制的改进起到了一定的指导作用。从整体看来，我国的科技成果评估工作的起步虽然较晚，但成长速度相对较快，然而目前尚未构建一套较为完善、应用范围广、获得普遍认同的评价指标体系，也未形成一套严格的科研评价制度。具体到水利科技成果评价，在实践和理论方面的研究都比较缺乏。本文试图构建一个系统、科学的指标体系，并采用层次分析法和模糊综合评价法评估水科技成果的价值[5]。

1科技成果评价指标体系

1.1评价指标的初选

构建指标体系需考虑以下原则：① 系统性；② 简单性；③ 客观性；④ 时效性；⑤ 可测性；⑥ 定量指标与定性指标相结合；⑦ 绝对指标和相对指标相结合；⑧ 指标应尽可能避免明显的包含关系；⑨ 指标的选择要保持相同的趋势；⑩ 指标的设置要有重点、有层次。结合《中国科技统计年鉴》及《中国高技术产业年鉴》等相关材料，根据图1所示，设计各种指标体系，初步构建评价指标体系基本框架。

图1　评价指标体系构建程序

1.2界定投入产出

投入界定：包括资金投入、人才投入、物质投入、信息投入。

一支致力于世界最前沿水利科技研究的科研队伍是水利科技创新的基础。稳定的科技资金来源、国家社会和其他团体的资金渠道、先进的科学仪器设备是水利科技创新的基本保障。

产出界定：科技产出主要从科研项目的直接科技产出、经济效益产出和社会效益产出3个方面来考虑。

2水利科技投入产出指标体系的初步遴选

2.1水利科技投入产出初步评价指标

根据本文所述水利科技项目投入产出的界定及图1所示程序，综合考虑水利科技成果的特征及其分类，初步选出如表1所示的水利科技投入产出评价指标。

表1　初步选出的水利科技投入产出评价指标

续表

产 出 指 标经济效益生态效益社会效益直接经济效益成果交易收益节约成本增加收入间接经济效益防洪减灾降低直接经济损失防洪减灾降低人员伤亡数量除涝效益灌溉效益发电效益供水效益水土治理面积污废水排放减少量水质提高程度增加就业人口提高决策水平促进科技进步推动社会发展X17X18X19X20

2.2水利科技投入产出指标体系的进一步筛选

指标体系初步建立后就要按照指标设置的原则进行验证。从上述指标体系来看，基本满足系统性和客观性原则；既有定量指标，也有定性指标；既有绝对指标，又有相对指标。但总体来看，指标体系尚不够简明，部分指标的可测性较难，因此需要对产出指标进一步简化。根据表1指标体系的特点，本文采用定性分析与定量评价相结合的方法对指标体系作进一步简化，其中定量评价主要针对部分可以通过调研获取相关数据资料或者可以通过计算分析的指标，应用相关分析法来进一步筛选指标。通过相关系数评价，删除一些高度相关的评价指标，使各个指标之间相互独立，从而消除或减少因评价指标重复对评价结果的影响，保证指标体系的简明。

指标筛选的相关分析分为3个步骤：

1) 评价指标的标准化处理。由于评价指标的量纲不同，需要对原始调研数据进行量纲一化处理，以减少评价指标的不同计量单位对分析结果的影响。

2) 计算各个评价指标之间的相关系数Rij。相关系数Rij的范围在(-1，+1)之间。+1代表完全正相关；-1表示完全负相关；0表示不相关。

3) 按照研究需要确定一个临界值M(0M，则可以去除其中的一个评价指标(Xi或Xj)：如果Rij

基于上述原理，本文借鉴水利部项目《水利科技统计及贡献率分析研究》(项目验收文号：(2009)国科科函字第136号)的相关调研数据，运用SPSS软件对初始评价指标体系中的产出类指标进行相关分析。各指标均以Xi(i=11,12,13,…，20)代替(如表1所示)。除X19和X20缺乏调研数据外，其他产出类指标均通过调研获得原始数据。按照一定的原则进行数据量化赋值后，用SPSS软件的相关分析得到X11～X18的相关系数，见表2。

表2　产出指标相关系数

从表2可知：发表论文数量(X11)与获奖情况(X14)的相关系数为0.827，与人才培养数量(X16)的相关系数为0.965；获奖情况(X14)与人才培养数量(X16)的相关系数为0.847，都存在着较大的相关关系，证明他们存在信息上的重叠。这在常理上也是显而易见的，发表的论文越多，质量越高，那么成果获奖数就越多，获奖级别就越高。同时科学研究关键是靠人才，人才培养的层次越高，获得硕士、博士学位的人数越多，自然而然发表的论文也就越多，质量越高。因此，若给定临界值M为0.8，在选定发表论文数量(X11)的情况下，可以删除获奖情况(X14)和人才培养数量(X16)。水利科技项目的生态效益(X19)限于数据资料可得性未能计算出与其他指标的相关系数，但从其评价的内涵分析，其中的水土治理面积与水利经济效益中的防洪减灾效益和除涝效益存在一定的相关性，因此为了避免产出指标的多重共线性，对于水土治理面积也简化考虑，更多的是从定性的角度分析其生态效益。水利科技项目产出的社会效益(X20)列出了4种，即增加知识的积累、提高决策水平、增进科学和技术的进步、促进社会发展，都是偏重宏观方面的效益，从微观的角度测算单个科技项目或单项科技成果的社会效益难度较大，不具备可测性，因此本文对微观层面的水利科技成果的社会效益也仅作定性分析。

2.3最终指标体系的确定

通过上述的指标间的相关分析和综合比较，进一步筛选剔除一些指标，形成最终的水利科技投入产出评价指标体系，如表3所示。

表3　最终的水利科技项目投入产出指标体系

3水利科技成果评价指标的权重

3.1构造判断矩阵

在一个准则支配下，对指标因素进行两两比较，确定相对重要性,并表示为1～ 9标度法(见表4)。在下层指标因素之间，明确相对重要性,然后使用这些标度值来构造判断矩阵[6-7]：A= (aij)n×n，且aij=1(i=j)，aij=1/a(i≠j)，aij>0(i,j=1,2,3,…,n)。

表4　Saaty标度

表3指标标体系中，评价对象T的影响程度由1级指标(T1,T2)确定，T1的影响程度由2级指标(T11,T12,T13,T14)确定， 以此类推，2级指标的影响程度由3级指标确定。根据Saaty标度，利用专家打分的方法获得判断矩阵。

3.2确定权重

一致性检验[8-10]：一致性比率CR=CI/RI，其中：CI=(λmax-n)/(n-1)；RI见表5。

表5　平均随机一致性指标值

4水利科技成果的模糊综合评价

由于水利科技成果种类具有多样性，同时成果价值具有不确定性和模糊性，所以水利科技成果价值评估较为复杂，单独使用数学公式计算出准确的数据的可能性较低。此外，运用经验等主观定性的方法来推断评估结果偏差过大。因此,将定性和定量相结合将是最佳的评估方法,使得评估方法程序化、量化,从而得到一个更为合理的数据。综上所述，本文引入模糊综合评价法进行分析。模糊综合评价方法就是对模糊对象进行检查，将反映模糊对象的模糊概念作为模糊集合，建立恰当的隶属函数，并通过模糊集合论进行有关计算和变化，由定量分析进行评估[11-14]。

把已经构建的水利科技成果价值评估指标体系(表3)视为评价指标集：T= {T1,T2}，T1={T11,T12,T13,T14}，T2= {T21,T22}，3级指标以此类推。根据层次分析法计算出各指标权重。设T的权重W={w1,w2}，T1中各指标权重w1={w11,w12,w13,w14},T2中各指标权重w2={w21,w22}，3级指标的权重以此类推。

为了探讨水利科技成果的实际价值，使用一个初评值P。P由专家依据经验初始预测被评价的水利科技成果价值量，加权平均专家的权重值。然后设计7个评级，构建一个评论集：V={v1,v2,v3,v4,v5,v6,v7}={非常高，很高，高，一般，低，很低，非常低}。

4.1级单指标模糊评价

4.2多级模糊综合评价

Ti的模糊综合评估结果组成更高一级T的评价矩阵R=(B1,B2)T，通过模糊合成，得到T的模糊综合评价为B=W·R=[w1,w2]·[B1,B2]T。

4.3水利科技成果价值计算

设初步评估值为N，与偏差度相乘，即N*=N×P。N*即为一项水利科技成果的实际价值。

5结束语

在对水利科技成果价值缺乏有效价值评价研究的情况下，全面构建水利科技成果价值评价体系，并借鉴水利部项目《水利科技统计及贡献率分析研究》的相关调研数据，运用SPSS软件对初始评价指标体系中的产出类指标进行相关分析，对指标体系作进一步筛选，使得指标体系具有简明性和可测性。最后运用AHP求得指标权重，并利用初评值和偏差系数及其分值，使用模糊综合评价法对水利科技成果进行价值量计算。

因篇幅所限，本文单从理论角度运用模糊综合评价对水利科技成果价值评估方法进行了分析和研究，对于指标体系的科学性以及价值评价方法的有效性还需进一步的实证分析。

参考文献：

[1]中共中央国务院关于加快水利改革发展的决定[J].中国水利,2011 (4)：1.

[2]王文华.技术经济效益评价指标体系与方法的探讨[J].上海统计,2000(4):26-28.

[3]董宏林,温淑萍,杨晓洁.不同类型的农业科技成果评价指标体系的建立[J].农业科技管理,2006(2):79-82，96.

[4]刘如顺,刘大海,彭伟.海洋应用类科技项目成果评价指标体系设计与评价方法初探[J].海洋技术,2010(3):128-130.

[5]柴国荣,许崇美,闵宗陶.科技成果转化评价指标体系设计及应用研究[J].软科学,2010(2):1-5.

[6]刘惠萍.基于网络层次分析法的政府绩效评估研究[J].科学学与科学技术管理,2006(6):111- 115.

[7]叶珍.基于AHP的模糊综合评价方法研究及应用[D].广州：华南理工大学， 2010.

[8]杨笑源，赵晓刚.应用改进层次分析法和模糊综合评判的油库静电灾害评估[J].重庆理工大学学报(自然科学)，2015(2):136 -140.

[9]陈冀生，周蜀，罗剑.关于共建项目最优采购年度的层次分析[J].重庆理工大学学报(自然科学)， 2014(2):123-126.

[10]喻立，王建力，李昌晓，等.基于DPSIR与AHP的宁夏沙湖湿地健康评价[J].西南大学学报(自然科学版),2014(2):124-130.

[11]孙文鑫,卓春英,王国栋.模糊综合评判在高职院校奖学金评定中的应用[J].重庆工商大学学报(自然科学版)，2014(9)：35-39.

[12]方国强，滕克难.基于模糊综合评判的弹道中段目标识别技术[J].四川兵工学报，2014(3)：112-114.

[13]陈丹.AHP模糊综合评价在课堂教学质量评价上的应用[J].重庆工商大学学报(自然科学版)，2014(4)：51-54.

[14]董春卫，印凡成.应用多层次熵权模糊综合评价法的城镇家庭基本生活水平影响因素分析[J].重庆理工大学学报(自然科学)， 2014(9):122-129.

(责任编辑刘舸)

Design and Application Research on Evaluation Index System of Water conservancy Sci-Tech Achievements

YUAN Jiea，YUAN Ru-huab

(a.Business School; b. Institute Research of Water Economy,Hohai University, Nanjing 210000, China)

Abstract:Based on the principle of index set, using SPSS for the ministry of water resources projects’ related survey data, which is from “Research and analysis of water conservancy sci-tech and the contribution rate”, we built an evaluation index system of water conservancy sci-tech achievements. Finally, using AHP and fuzzy comprehensive evaluation, we analyzed the property appraisal of achievements in order to provide a value scientific method for Water conservancy value evaluation of sci-tech achievements.

Key words:water conservancy sci-tech achievement; evaluation index system; AHP; fuzzy comprehensive evaluation

中图分类号：O21

文献标识码：A 1674-8425(2016)03-0134-06

doi:10.3969/j.issn.1674-8425(z).2016.03.023

作者简介：袁杰(1988—)，男，安徽六安人，硕士，主要从事技术经济及管理研究。

基金项目：国家水利公益性行业专项“水利科技贡献率测算及科研成果评价体系研究”(201301055)

收稿日期：2015-04-18

引用格式：袁杰,袁汝华.水利科技成果评价指标体系构建及应用[J].重庆理工大学学报(自然科学)，2016(3):134-139.

Citation format：YUAN Jie，YUAN Ru-hua.Design and Application Research on Evaluation Index System of Water conservancy Sci-Tech Achievements[J].Journal of Chongqing University of Technology(Natural Science)，2016(3):134-139.