通信运营信息的大数据采集及存储系统和方法研究

郭 军

（61932 部队，北京 100071）

大数据时代的到来，改变了人类生活的方方面面，人们的生活在因为大数据的到来而受益良多，比如人们的生活中支付的方式从现金支付逐渐转变成手机支付，人们的生活物品的超市购买也逐渐实现网络购买、送货上门等，这些改变给人们的日常工作和生活带来了更多的便利。但同时值得指出的是，大数据时代的到来同样也带来了一定的影响，因此需要对大数据的采集和存储投入更多的关注，以便更好的利用通信运营信息大数据。

1 通信运营下的大数据平台

在通信运营信息下的大数据主要是为了进行数据的采集、处理以及存储，将这些大数据进行处理可以更好的对这个时代的大数据的变化动向予以及时的把握，从而制定更好的发展方向和前景。而大数据对信息的收集主要把包括三个方面，对用户信息的收集、对网络信息的收集、对管理系统与用户的关系进行收集。

数据源层：在我国有三大通信运营商，他们各自都有着大量的数据量，而数据的宽度和广度都很大，这也以此为通信运营的大数据网络提供了丰富的数据，而通信运营大数据平台主要由数据源层、数据采集层、数据存储层、数据分析层、数据汇聚层、数据服务层、用户应用层、平台管理系统构成。

数据采集层：ETL 利用第三方数据和业务系统数据，结合业务数据库终端接口、移动DPI 信息、FTP 文件传输协议等对数据进行处理，并通过提取、转换、加载等方式传输到数据平台存储层。……