大数据技术及应用浅析

周彬

摘要：随着互联网技术的发展，人类社会逐渐步入数据技术时代。数据成了构成信息化社会的基本元素，由原来的数据积累变成一项优质的社会资源，大数据作为继云计算、物联网之后IT行业又一颠覆性的技术。本文结合大数据的特点，介绍大数据的主要技术，对大数据在人类社会的生产和生活方面产生的影响和创造的机遇进行展望。

关键词：大数据；大数据技术大数据发展

一、大数据的源起

随着计算机技术在人类社会的融合，使我们的生活、工作和学习都产生了巨大的、海量的数据。例如一些医疗服务类网站，将医生信息、门诊信息等现实事物数字化，形成了大量网络数据。互联网社交、搜索和电商也在不断产生大量数据。大量移动电子终端设备的出现（物联、车联、GPS等），更加快了互联网数据制造的速度。从数字上说，到2012年，互联网数据量已经从TB（1024GB=1TB）级别跃升到PB（1024TB=1PB）、EB（1024PB=1EB）乃至ZB（1024EB=1ZB）级别。据估计，到2020年，全球数据量将达到2015年的44倍，增长速度超过摩尔定律。而这样的增长速度和规模已经超出了日常软件在可容忍期限内获取、管理和加工数据的能力。

其实早在1980年著名未来学家托夫勒在其所著的《第三次浪潮》中就热情地将“大数据”称颂为 “第三次浪潮的华彩乐章”。但大数据被重视应用则是到了2011年由麦肯锡公司发布了关于“大数据”的报告，该报告对“大数据”的影响、关键技术和应用领域等都进行了详尽的分析。

二、大数据的主要技术

大数据技术的意义不在于庞大的数据集合，而是从各种类型的数据中快速获得有价值信息的技术。……