深圳文博会分会场评估指标体系构建研究

熊小春

摘要：分会场是中国（深圳）国际文化产业博览交易会的重要组成部分，具有很强的经济效益和社会效应。本文旨在探索文博会分会场举办成效的综合评估问题。在对过往文献及评估实践活动的研究基础上，通过专家访谈确定分会场评估模型。运用德尔菲法和层次分析法，尝试建立一个包括分会场投入、产出及社会影响、参与者感知等多维度的分会场评估指标体系。该体系的具有多元系统性的特点，并重视分会场的产出及社会影响这一评估指标。

关键词：文博会；分会场；评估指标体系；构建

一、前言

自2004年首届举办以来，中国（深圳）国际文化产业博览交易会（以下简称文博会）迄今已成功举办了13届，分会场数量也由首届的唯一一个逐届增加到本届的68个。分会场的经济效益及社会影响也日益显现，关于分会场的评估内容经历了几次变化，主要是围绕分会场承办单位影响力、办会成果、顾客满意度以及主管部门评价等方面，同时强调分会场要具有内容性、产业性和创意性。

总体来看，文博会分会场现行的评估，主要关注对参与者的满意度和分会场的产出成果两大内容，但评估细项内容缺乏系统性。考虑到分会场具有时效性、联动性以及较高的投入等特点，在借鉴其他活动项目评估的基础上，本研究在评估内容的设计上除了包括参与者的满意度和分会场的产出成果两方面，只有明确了要达到的效果和影响，才能更好地帮助分会场设定相应的目标，明确哪些环节需要完善，如何成功和高效地举办分会场各项活动。

二、研究方法和过程

本着理论结合实际的原则，本研究运用定性（文献研究、访谈）和定量（德尔菲问卷调查、层次分析法）相结合的研究方法来确定评估指标体系的构成及其权重设置。研究时间从2016年10月到2017年6月。在对相关文献进行分析研究的基础之上，结合调研访谈掌握到的深圳文博会分会场实际情况和专家访谈意见，本研究初步设计了包括分会场、参与者和社会影响三个评估维度的体系模型。

在模型基础上，本研究拟定了“深圳市文博会分会场评估指标体系构建问卷调查表”。调查问卷由四个部分的内容构成：调查介绍、填写说明、指标重要性评价表和专家基本情况调查表。其中，指标重要性评价表中采用李克特五级量表将重要性分成五个等级。专家基本情况调查表主要是用了衡量专家的权威程度。通过邮件发放填写和现场访问填写两种方式，本研究进行了两轮专家问卷调查。由于第二轮专家意见基本协调一致，本研究未再进行第三轮调查。

从专家对评估模型指标的重要性判断意见中评选出较重要且可执行的评估指标项目，再对指标项目进行层次分析，确定各级指标的权重，以此构建出一套可实际操作的分会场评估指标体系。

三、调查结果分析

（一）专家基本情况和权威程度

本研究调查的专家共11位，包括学者7位、从业者3位、政府工作者1位。从回收的专家问卷分析结果来看，有10名专家的权威程度大于或等于0.7，占比达90.91%，表明所调查的专家权威性较好（见表1）。

（二）专家意见反馈及评估指标的修改确定

第一轮专家调查中共涉及3個一级指标、11个二级指标和36个三级指标，就专家反馈意见结果来看，一级指标和二级指标全部符合要求，三级指标有部分需要调整修改。其中，“志愿者参与”的均值为3，标准差大于1，变异系数超过25%，不符合要求，予以删除。“普通观众收益”和“带入主会场的专业观众数量”指标的标准差小于1，但变异系数大于0.25，说明这2个指标的专家认同程度不够，需要在第二轮中特别指出重新评价。此外，专家还建议对部分指标名称及其操作性定义的文字表述进行修改，使语意更清楚明确。其中，“普通观众人次”修改成“普通观众数量”；“合同成交额”修改成“实质成交额”，范围扩大，包括合同成交和零售成交的金额，与“意向成交额”相对应。

在第一轮的基础上，第二轮专家调查中共涉及3个一级指标、11个二级指标和35个三级指标。从调查结果来看，一、二级指标仍然全部符合要求，在35个三级指标中，只有原有的“带入主会场的专业观众数量”变异系数仍然大于0.25，考虑到这个指标主要考察文博会分会场与主会场的联系，作为分会场的一个成效性指标，本研究决定保留该指标。此外，专家对其余指标项均无任何意见，故不再进行下一轮专家调查。

（三）分会场评估指标体系权重的确定

根据德尔菲法得出的指标体系递阶层次结构，通过两两比较的方式，可以确定受上一层指标项目支配的同一层级指标项之间的相对重要性，形成判断矩阵。因此，本研究将构建一级指标、二级指标和三级指标各自层级内的两两判断矩阵。之后，将判断矩阵转换为矩阵，利用方根法计算各级指标项的权重，并进行一致性检验，最终确立指标体系中的各层级指标权重（见表2）。

四、结论

本研究以文献回顾为基础，根据对相关展会与活动的评估内容、往届文博会分会场评估内容以及调研访谈的资料，设计出了分会场评估指标模型。然后通过德尔菲专家问卷调查，筛选出专家达成共识的重要评估指标项目，进而确定文博会分会场评估指标体系的构成，共包含3个一级指标、11个二级指标和35个三级指标项。评估指标体系的构成确定之后，通过层次分析法针对各层级指标进行成对比较，了解专家对于各项指标的权重与优先顺序。

研究结果表明，专家认为最重要的一级指标是产出及社会影响（0.3913），其次分别是分会场投入（0.3478）、参与者满意度和受益度（0.2609）；最重要的前四项二级指标是参与者满意度（0.1630）、活动规模（0.1565）、宣传推广（0.1096）和参与者受益度（0.0978）；最重要的前六项三级指标是实质成交额（0.0671）、投入总费用（0.0636）、专业观众数量（0.0540）、普通观众数量（0.0486）、活动数量（0.0407）、人员专业能力（0.0352）。

本研究的创新之处在于运用德尔菲法、层次分析法，从指标模型设计到指标构成及权重的确定再到指标数据获取等全过程，系统性地提供了一套完整的评估指标体系，不仅在指标构成上丰富了现有评估的指标内容，且在指标权重及赋分、数据获取上更加科学、更为合理。

参考文献：

[1]王为理.从边缘走向中心：深圳文化产业发展研究.北京：人民出版社，2007

[2]洪振强.当代中国文化产业博览会规范发展问题研究.艺术百家，2011