张计龙
(复旦大学图书馆 上海 200433)
随着信息技术的发展,泛在知识环境下数据呈现爆发式的增长并体现出社会化趋势。根据国际数据公司(IDC)的研究结果,2008年全球产生的数据量为0.49ZB(1ZB等于 10亿个 TB),2009年的数据量为0.8ZB,2010年增长为1.4ZB,2011年的数据更是高达1.8ZB,相当于全球每人产生200GB以上的数据[1]。到2020年,全世界所产生的数据规模将达到今天的44倍[2]。一般认为数据量达到PB级(1000个TB)的数据可称为大数据(Big Data)。今天大数据已经成为一种自然资源,业界普遍认为大数据不被利用就是资源浪费。面对大数据的规模和复杂性,现有技术在大数据的获取、存储、搜索、分享、分析和可视化方面显得无能为力,需要对不同业务领域的大数据研究有效处理技术加以应对。
大数据时代的图书馆面临更加巨大的环境压力。从内部资源和服务角度看,图书馆馆藏资源纸本增量不断减少,更多的数字资源可在网上直接获取,例如Google Scholar的海量数字资源。与此同时,商业搜索引擎提供的服务正迅速吞噬图书馆提供的OPAC服务,而无处不在的社会化网络交流服务平台也使得传统的参考咨询服务优势不断减少。从外部需求来看,互联网信息环境发生了巨大变化,如Google与图书馆合作数字化馆藏、原生数字资源开放获取、新技术的渗透影响等,加上经济环境的衰退造成的采访经费压力加大以及大数据环境下教学、科研活动对图书馆资源和服务提出了更高的新要求。……