校园一卡通平台应用效果评价研究

2017-06-16 06:06焦宝臣李珊珊张四海
中国教育信息化·高教职教 2017年6期
关键词:评价指标体系层次分析法应用效果

焦宝臣++李珊珊++张四海

摘 要:校园一卡通平台作为高校信息化建设的重要内容,备受关注。目前许多高校已经开展了一卡通平台的建设,但缺乏对其进行有效的评价。本文提出了从实际使用角度,对校园一卡通平台进行应用效果评价研究,依据影响平台使用的因素,研制指标体系,并构建了具有二层级的应用效果评价指标。采用层次分析法,通过专家打分的方式,确定了指标权重。并以南开大学为例进行了应用效果评价,结果显示其应用效果处于良好水平。形成了一整套可行的校园一卡通平台应用效果评价方案。通过应用效果评价,不但可以对学校当前一卡通平台应用水平有直观的判断,也可为平台的建设和发展提供重要意见和建议。

关键词:应用效果;校园一卡通平台;层次分析法;评价指标体系

中图分类号:G40-058.1 文献标志码:A 文章编号:1673-8454(2017)11-0086-03

一、引言

信息化建设成为以高校为代表的教育领域所关注的重点。在推进信息化建设的过程中,各高校大多将注意力放在建设上,即将先进的信息技术应用到学校信息化建设中,但是往往忽略了信息化建设的应用效果、如何评价学校信息化建设的成果。

对信息化建设成果的评价这一方面,大家的研究大多集中在某学校或地区信息化建设水平的研究上,或者也有从绩效角度来分析信息建设情况。[1][2]诚然,这能够从信息化建设情况角度给出一定的结论性的评价,但是缺乏更加直观客观地反映信息化建设的效果,或者水平评价并不能为信息化建设提供更加有益的意见或建议。

应用效果评价,是从实际使用或应用的角度,分析、研究和评价信息化建设的应用效果。这不但能够反应信息化应用效果水平,而且也能够更具针对性地对信息化建设提出意见或建议。

校园一卡通平台是集多种管理服务功能于一身的信息管理平台系统,主要功能包括身份识别、公共信息服务、综合消费、金融服务等功能。其建设使用能够方便师生日常生活、消费和教学,能够提升学校服务管理水平。當前各高校也已积极开展了校园一卡通平台建设,人们关注于建设更加符合学校自身情况的平台系统,即更多地集中在如何建设一卡通平台来提供服务。而一卡通平台建设使用后对学校所带来的应用效果往往被忽略。

为此,本文从实际使用角度对校园一卡通平台进行应用效果评价研究。不但要从该平台的实际应用效果进行评价,而且也为平台进一步发展建设提出重要意见。

二、评价思路

对校园一卡通平台进行应用效果评价,首先,需要从实际使用角度分析研制评价指标;其次,采用合适的数学方法确定指标权重值,形成评价体系;再次,对评价指标建立评语等级,形成问卷调查表;最后,以具体某高校为例,进行问卷调查,利用已建立的评价指标体系进行分析,最后给出评价结果。

三、评价指标

1.一级指标

对校园一卡通平台进行应用效果评价研究,直观上来说应该从实际使用的角度来分析,即站在使用者的角度来研究。此外,作为全校师生服务的平台性系统,其对学校相关管理工作的影响,平台自身情况如安全性、稳定性,都对平台的实际应用产生重要影响。

因此,评价校园一卡通平台应用效果的一级指标应包括三个:①“学校服务水平的提升”,是指一卡通平台建成后,普通用户能够更加便利地从事校园学习、生活等活动。②“管理工作的改进”,是指一卡通平台建成后,学校的管理工作能有明显的改进或提升。③“校园一卡通平台自身特性”,一卡通平台作为平台性软件产品,其自身的一些特性,诸如平台是否安全、接口丰富程度等都会对平台的建设应用产生重要影响。

2.二级指标

上述构建的一级指标较为宏观,需要进一步分析研究能够直接表达出平台的应用效果和关键的影响因素。为此,分别针对三个一级指标研制出二级指标。表1给出了一卡通平台应用效果二级评价指标及其说明。

四、确定指标权重值

层次分析法(Analytic Hierarchy Process,AHP)是确定分层级的指标权重值的常用方法。AHP是美国运筹学家萨迪(T.L. Saaty)教授于20世纪70年代初期提出的,在决策分析、产业结构研究、科技成果评价、发展战略规划、人才考核评价及发展目标分析的许多领域都取得了令人满意的成果。[4]其在计算指标权重值方面也有成熟的应用,[5]具体方法步骤如下:①对分层次的指标,为同一指标下同一层级的指标,依据两两比较原则,构建调查表。②在研究生系统相关专家做问卷调查。③依据问卷调查结果,构建判断矩阵。④采用特征根法计算得出指标的权重值,具体运算过程可用软件Expert Choice实现。[6]

AHP法计算权重值是较为成熟的方法,下面以南开大学为例,通过上述步骤构建研究生应用效果评价指标体系。表2给出了依据AHP法采用Expert Choice软件计算得到的南开大学一卡通平台应用效果评价指标及其权重值。从表中的一级指标及其权重中可以看出,“管理工作的改进”的权重值为0.46,要明显大于“学校服务水平的提升”的0.221和“校园一卡通平台自身特性”的0.319。这说明“管理工作的改进”对系统的使用具有决定性的影响。也就是说,校园一卡通平台的建设或升级改造应更多地考虑为学校管理工作方面带来提升。这样才能使平台有更好的应用效果。

此外,在所有二级指标中“简化学校办事流程”、“降低人力成本”、“开放性和可扩展性”和“圈存机性能”要明显高于其他指标,权重值依次分别为0.231、0.195、0.16、0.111。也就是说,这四个指标所代表的内容应该更加引起平台建设者的关注。在一卡通平台建设或升级改造过程中应更加注重简化学校办事流程,更多地使用圈存机等终端代替人工,降低人力成本,这样才能获得更好的用户体验和使用效果。此外,所选择的一卡通平台产品应更关注平台的开发性和可扩展性,同时还应该选择具有良好性能的圈存机终端。

综上,通过采用AHP分析法,采用专家打分的方式,可以获得指标的权重值,形成应用效果评价体系。通过分析指标的权重值,能够获得特定研究对象(南开大学)的一卡通平台未来建设或升级的重点方面,也就是权重值较高的指标应该引起更多的关注。

五、评价实例

南开大学现有在校师生近3万人,校园一卡通平台自从2007年开始建设使用,至今已有近10年的历史。该平台有较广泛的使用和较成熟的用户,能够为应用效果评价研究提供良好的实例。

在以南开大学为例确定了指标权重的基础之上,通过建立评语等级,利用指标形成问卷调查表。采用四级评语来标识指标的等级。分别如下:“A”级对应100分;“B”对应85分;“C”对应75分;“D”对应60分。将构建评价体系中的二级指标(见表3)按照A、B、C、D四级评语来标识,形成问卷调查表。随机抽取一定数量的用户进行问卷调查,包括普通教师、学生和平台维护人员等等。对每一项指标的调查结果求取平均值作为最后的结果,之后再与该指标对应的权重值作乘法,最后將结果求和作为研究生应用效果值。表3给出了按照上述方式得出的南开大学研究生系统应用效果评价结果。最后得到的应用效果值是85.195,处于B级良好水平。

六、总结与展望

本文从实际应用角度出发对校园一卡通平台应用效果评价进行研究,构建具有二层级的评价指标体系,采用AHP法确定指标权重;以南开大学为例,进行问卷调查,最后得出系统应用效果值。形成了一套可行的校园一卡通平台应用效果评价方案。

该方案在构建指标体系过程中,通过AHP法获得的指标权重值,能够为校园一卡通平台建设或升级提供有益的意见和建议。不但能够对当前校园一卡通平台应用效果水平给出评价,而且为平台的发展建设提供重要参考。

本文对校园一卡通平台应用效果评价进行了初步研究,在指标体系构建上形成了较为可行的思路方法。但是,由于AHP法本身采用专家打分的方式获得指标值,这难免会有专家喜好的影响。因此从数学上寻找更加优良的方法,剔除人为的感性影响,尽量以定量的方式对平台进行应用效果评价,这是下一步要努力的方向。

参考文献:

[1]谢幼如,常亚洁.绩效导向的教育信息化评价模型的构建[J].中国电化教育,2015(1):56-61.

[2]李涛.高校信息化水平评估指标体系及综合评判模型研究[D].长沙:中南大学, 2005.

[3]焦宝臣,罗敏,李珊珊,张四海.南开大学智慧校园框架下设计自主注册系统[J].中国教育网络,2016(11):74-75.

[4]张炳江.层次分析法及其应用案例[M].北京:电子工业出版社,2014:12-13.

[5]李文光,范坤,赵莹.深圳市基础教育信息化建设与应用评价指标体系的探索[J].中国电化教育,2014(1):40-44.

[6]孔令波.制造业管理型信息系统评价体系的研究[D].昆明:昆明理工大学,2006: 49-50.

(编辑:王天鹏)

猜你喜欢
评价指标体系层次分析法应用效果
民办高职院校评价指标体系研究
化疗联合CIK细胞治疗卵巢癌的临床观察
负压封闭引流技术治疗四肢创伤复杂创面的临床应用分析