基于云计算的大数据分析

翟顺诚 河南大学（计算机科学与技术）

1.引言

大数据极大推动了云计算的发展。印度学者认为，大数据将大大促进印度生产率的提高，因为它不仅影响软件行业，还将影响公共服务行业，如健康、行政和教育等各行业。据麦肯锡全球研究院估计，全球产生的数据每年以40%的速率递增，到2020年，数据量将是2009年的44倍。这些数据来自于传感器收集到的天气数据、社交媒体上的各种帖子、数字照片和视频、商业交易记录、移动电话的GPS信息等。大数据超出了传统数据的存储和计算，必须寻找更新的技术，云计算使得巨大的计算能力变得更加容易获得。

2.云计算平台

云端是指服务不在本地，可以指服务器，和普通的服务器不一样，云端的服务器的资源是共享的，一旦某个服务器不能承受，将会把任务分配给其他服务器。

云计算网络有两个任务，将资源池变成一个虚拟资源，然后连接所有位置的用户到这些资源。云计算的服务平台包括几个层次：基础设施即服务(IaaS)、平台即服务(PaaS)和软件即服务(SaaS)。IaaS是消费者通过Internet可以从完整的计算机基础设施获得服务。例如：硬件服务器租用。

现今商业化的云计算平台主要分为几大类：

（1） 微软 Windows Azure的主要目标是为开发者提供一个平台，帮助开发可运行在云服务器、数据中心、Web和PC上的应用程序。技术特征是整合其所用的软件及数据服务，使用.NET开发技术，运用大型应用软件技术，以Azure平台提供服务。

（2）Google 技术特征是存储以及运算水平扩充能力，使用平行分散技术 MapReduce、BigTable、GFS等，提供Google AppEngine和应用代管服务，使用Python、java语言进行开发。……