基于粒计算的大数据处理分析

郝冉

（中认国证（北京）评价技术服务有限公司 北京市 100020）

维基百科上这样定义大数据：在一定的时间内无法使用常规方式进行内容抓取、管理和分析处理的数据集合。大数据的“大”有两层含义，一是指数据量大，还指数据类型多种多样。随着社会信息化程度逐渐提高，市场竞争、社会发展分析等多方面都要依仗大数据来推进，从数据中挖掘出其背后的信息已成为目前各国重要的研究方向。为了提高对海量数据的处理效率，云计算、粒计算等相关技术随之出现，这些技术的应用使得数据充分发挥了它的作用，来源于社会并服务于社会。2020 年中国通信院大数据白皮书预测：2035 年全球数据总量将达到2142ZB。

各国各地区都已经意识到不断增长的各种数据中蕴含着丰富的实际意义，与此同时，信息行业的技术工作者们也感受到了来自庞大数据的巨大挑战，目前以往的技术手段和性能已经很难满足对当前数据量的处理要求，因此使得人们需要不断在数据存储、数据处理、计算机模型与性能等多个相关领域进行探索和提高，以达到尽可能快速高效地将这些庞大的数据中蕴藏的价值充分挖掘出来，使其发挥作用促进社会与科技的不断进步。

粒计算作为一种更为有效的方法论，主要是为了建立以外部环境为基础，以用户为中心的一种思想，从而简化人们对于物理与虚拟世界的认知，并在此基础上，用适当粒度的“粒”作为中间环节从而求得整个问题的解，相较于对完整问题进行求解的过程而言，以合适的粒度的“粒”作为处理对象可以有效地提高求解效率。……