大数据时代的机遇与挑战

莫建华

摘要：大数据时代已经来临，并且开始深入到各个行业中，带来7很多的机遇，也带来了很多的挑战。在文中主要就大数据时代的机遇与挑战进行分析，为更好的在大数据时代中发展提供支持。

关键词：大数据机遇挑战

时至今日，大数据时代的来临已经毋庸置疑，你的每一个习惯动作、你的每次通话过程、你的每一次消费行为、你的每一份就诊记录，都正在被巨大的数字网络记录下来、串联起来。大数据正悄悄包围着我们不管你有无感受到，它都在影响和改变着我们的生活，甚至连世界经济格局也在酝酿着巨大变革。

一、认识大数据

大数据，简单说，就是把所有的海量的数据放到一起分析，找到关联，实现预测。大数据是一个宽泛的概念，见仁见智。“大”是大数据的一个重要特征，但远远不是全部，其核心能力，是发现规律和预测未来。它主要有四个特征，即海量的数据规模、快速的数据流转、多样的数据类型和巨大的数据价值。

二、大数据主要来源

（一）传感器数据：分布在不同地理位置上的传感器，对所处环境进行感知，不断生成数据。

（二）网站点击流数据：为了进行有效的市场营销和推广，用户在网上的每个点击及其时间都被记录下来，利用这些数据，服务提供商可以对用户存取模式进行仔细的分析，从而提供更加具有针对性的服务。

（三）移动设备数据：通过移动电子设备包括移动电话和PDA、导航设备等，我们可以获得设备和人员的位置、移动、用户行为等信息，对这些信息进行及时的分析，可以帮助我们进行有效的决策，比如交通监控和疏导系统。

（四）射频ID数据：RFID 可以嵌入到产品中，实现物体的跟踪，从而产生大量数据。

三、大数据的广泛应用

电子政务领域：大数据的发展，将极大地改变政府的管理模式，有利于节约政府投资、加强市场监管能力、提高政府决策能力、提升公共服务能力，实现区域化管理。目前，我国有很多个城市，正构建“智慧城市”，即利用大数据的整合和分析来治理社会。

金融领域：大数据可大大助力推进高频金融交易和小额信贷，协助金融企业精准营销。未来大数据可能成为最大的金融交易产品。未来金融大数据将会如基础设施一样，有金融数据提供方、金融监管者，金融大数据的交叉复用等，最终将成为金融业进行重要活动的基础设施。

教育领域：现在，大数据分析已经被应用到美国的公共教育中，成为教学改革的重要力量。在加拿大，教育科技公司“渴望学习”已经面向高等教育领域的学生，推出了基于过去的学习成绩数据预测并改善未来学习成绩的大数据服务项目。

生活娱乐领域：在春运这场堪称人类历史上最大规模的短期迁徙中，人群从哪儿去了哪儿？哪些线路最热门？在以往，这些问题可能难以精确回答。但随着技术进步，通过应用“大数据”这一技术利器，人们已经接近“在迷宫中感受全局”地看见春运的全景

国内有2亿手机用户使用百度地图，用户每次位置变化，百度都能得到数据。把手机网民的定位信息汇总成大数据进行分析，就能勾勒出人们的迁徙轨迹。

从上面各种事例中，可以得出以下结论：第一，数据是无价之宝;第二，价值虽有，但确如沙滩中的黄金;第三，数据融合的价值，要远远大于种类单一的数据价值。

四、大数据时代的机遇和挑战

今天，大数据似乎成了“灵丹妙药”，“包治百病”，无所不能。但千万别把“大数据”用做解决世界上所有问题的全能办法，无论是管理城市到消除贫困，制止恐怖袭击、疾病流行到拯救地球环境等，以为有了“大数据”，就没有解决不了的问题，这也是一种误解。人类的思想、个k的文化和行为模式、不同国家及社会的存在发展都非常复杂、曲折和独特，显然不能全部由计算机来“数字自己说话：

（一）面临的机遇

1.大数据技术促进国家和社会发展

大数据技术的运用前景是十分光明的。当前，我国正处在全面建设期，建设任务很重，建设下一代信息基础设施，发展现代信息技术产业体系，健全信息安全保障体系，推进信息网络技术广泛运用，是实现同步发展的保证。大数据分析对我们深刻领会世情和国情，把握规律，实现科学发展，做出科学决策具有重要意义，我们必须重新认识数据的重要价值。

2.大数据蓝海成为企业竞争的新焦点

大数据所能带来的巨大商业价值，被认为将引领一场足以与20世纪计算机革命匹敌的巨大变革。大数据正在对每个领域都造成影响，包括商业、经济等领域。大数据正在促生新的蓝海，催生新的经济增长点，正在成为企业竞争的新焦点。

在今天的大数据时代，商业的生态环境在不经意间发生了巨大的变化：网民和消费者的界限正在变得模糊，无处不在的智能终端，随时在线的网络传输，互动频繁的社交网络让以往只是网页浏览者的网民的面孔从模糊变得清晰，对于企业来说，他们第一次有机会进行大规模的精准化的消费者行为研究。作为保持着持续变革欲望的企业，主动地拥抱这种变化，从战略到战术层而开始自我的蜕变和进化将会让他们更加适应这个新的时代，大数据蓝海成为未来竞争的制高点。

3.大數据时代呼唤创新型人才

盖特纳咨询公司预测大数据将为全球带600万个IT新岗位和上千万个非IT岗位。中国是人才大国，但能理解与应用大数据的创新人才更是稀缺资源。 （二）面临挑战

1.大数据技术的运用仍有困难。目前，大数据技术的运用仍存在一些困难与挑战，体现在大数据挖掘的四个环节中。

（1）数据收集：要对来自网络包括物联网和机构信息系统的数据附上时空标志，去伪存真，尽可能收集异源甚至是异构的数据，还可与历史数据对照，多角度验证数据的全面性和可信性。

（2）数据存储：要达到低成本、低能耗、高可靠性目标，要用到冗余配置、分布化和云计算技术，存储时对数据进行分类，通过过滤和去重，减少存储量，并加入便于检索的标签。

（3）数据处理：大数据的复杂性使得难以用传统的方法描述与度量，需要将高维图像等多媒体数据降维后度量与处理，利用上下文关联进行语义分析，从大量动态及可能模棱两可的数据中综合信息，并导出可理解的内容。

（4）结果的可视化呈现：使结果更直观以便于洞察，目前，尽管计算机智能化有了很大进步，但还只能针对小规模、有结构或类结构的数据进行分析，谈不上深层次的数据挖掘，现有的数据挖掘算法在不同行业中难以通用。

2.大数据给信息安全带来新挑战

（1）加大隐私泄露风险。一是大量数据的集中存储增加了其泄露的风险;二是一些敏感数据的所有权和使用权并没有清晰界定。

（2）对现有存储和安防措施提出挑战。一是复杂的数据存储在一起可能造成企业安全管理不合规二是安全防护手段更新升级慢，存在漏洞。

（3）被运用到攻击手段中。黑客可收集更多有用信息，大数据分析让攻击更精准，同时大数据为黑客发起攻击提供了更多的机会。

在大数据时代，一方面我们通过对大量用户数据的分析，公司、企业、政府都可以更好的了解用户行为、消费习惯的等等，从而可以提供更好的服务。但是另外一方面，这又不可避免的对用户的隐私构成威胁、挑战。很多人已经意识到，在数据的应用方面，相关法律法规的制定变得越来越重要。作为用户，需要明确界定自己在数据的使用方面具有什么权力和义务;作为企业和政府，需要逐渐的定位清楚，在多大程度上可以并且用什么样的方式来使用用户的数据。