大数据背景下的软件工程关键技术分析

陈天宇，潘凌皓

（中移<苏州>软件技术有限公司 江苏 苏州 215000）

1 引言

伴随计算机技术的发展，大数据就成为其必然路径，软件设计自然就有了大数据背景。软件的发展是不断进步的，传统结构化信息逐渐被淘汰，信息处理要求极高，并与网络结合。大数据背景下的软件工程中的服务工程和组件工程发挥着越来越重要的作用。现在，面向服务的软件服务工程以服务为中心，依实际需要以分布式、虚拟化管理维护软件工程，解决系统集成与协作问题[1]。

网络化、服务化的大环境下，软件开发变得开放，通过信息共享、学术交流方式协同合作开发，在用户参与中完成高性价比软件系统。

开源软件是一种成功的软件开发模式，是学术界的重点研究对象。组件工程中提倡的是在众包基础上的开发模式，众包是分布式的解决方案和生产模式。密集型数据科研第四范式对密集数据研究时，建立统一理论和研究方法，强调大数据存储的重要性。

2 大数据和软件工程技术概念

2.1 大数据

伴随计算机技术的广泛应用，大数据技术逐步成熟，大数据由此产生。大数据技术是可以对网络环境巨量信息做筛选、分析和处理的一套应用实现。传统数据信息处理系统面对网络上巨量数据信息处理能力较弱，往往只能将大量数据当成无用数据而舍弃，自然会将许多有价值的信息一同丢弃。大数据技术实现了网络巨量数据的分类整理，为巨量数据的应用和挖掘提供基础支持。……