电信企业综合统计分析系统如何克服信息孤岛?

2013-09-08 01:27中国铁通集团有限公司杨磊
通信世界 2013年15期
关键词:数据仓库数据源信息管理系统

中国铁通集团有限公司 | 杨磊

随着电信运营商信息化建设的不断推进,企业中各个业务部门建设的IT管理系统越来越多,而这些系统间没有进行资料的共享,使有价值的数据变成了信息孤岛。因此,如何克服业务管理的过度分散,树立统一的经营思想和经营策略,建立一套基于企业综合信息数据成为运营企业亟待解决的问题。

数据共享达到全程自动处理

企业统计信息系统是一项复杂的工程,将企业的统计工作与信息管理系统建设相结合最终达到统计口径统一化、数据接口自动化、报表报送网络化、信息公布共享化,从而达到数据全程的处理自动化处理。

根据业务模式将综合统计监测平台分为三个子系统分别为统计信息管理系统、在线报送系统、信息展现平台,统计信息均采用“集中管理,分级负责”的管理模式。

统计信息管理系统主要包括数据采集、数据审核、数据汇总、报表制作和数据生成等五部分。该系统由各个基层单位从多个业务系统中提取数据,生成接口文件传送至综合统计系统,既满足通信行业对于报表的需求,同时业务满足公司内部需求分析。由于省分公司各业务系统中数据类型及数据格式不同,数据接口开放程度也不同,要对数据进行采集,因此需要将多种不同的数据源及不同的数据格式进行转换,以实现采集所有现存系统数据源目的。

在线报送系统建立与公司内所有上报单位的网络连接,通过浏览器在线报送,同时通过系统审核模块定制各类审核公式,对数据合理性进行自动判断,从数据源头提高统计数据质量,将更多的精力转移到对数据质量的监控和数据的分析应用上,提高统计信息服务的质量和水平。

信息展现平台定期向全公司进行信息发布,以B/S架构实现,具有维护成本低、分发形式多样便捷等优点。展现平台使用Adobe Flex SDK应用程序UI框架为基础,应用Adobe Flash进行开发,最终程序媒介为编译后的Flash二进制文件(*.swf),该文件的平台无关性可以使系统运行在任何常用操作系统和浏览器之上,从而实现跨平台特性。

系统逻辑架构设计

集团公司与各省分公司采用软件分级部署、数据分级存储的模式。二者通过在线直报形式实现数据传输。即省分公司收集基层数据后进行初审,然后通过在线直报系统进行上传数据,此时在线直报系统会根据定义的审核逻辑再次对统计数据进行审核,如出现错误在无法提交,直至数据正确才可提交。

数据流关系图

统计分析系统的总体数据流从层次上可以分为公司和省分两个层次。公司层面为总体数据汇总存储层、省分公司层面为数据收集准备层、信息展现为数据展现层。

公司层面和省分层面均有各个独立的统计管理系统系统支持,并实现数据的分级存储,信息展现平台可以作为统计分析数据的展示。

数据仓库更面向实际工作的应用,所以从应用的角度看要求加载的数据质量直接到关系数据仓库中数据的质量,从而影响到联机分析处理和数据挖掘的结果的质量。

ETL技术是综合统计系统的核心,也是数据仓库建设的重要环节。ETL(Extraction,Transformation,Loading)即数据的抽取、转换与装载ETL。其最主要的工作就是要在数据仓库和企业各类IT业务系统之间搭建起一座桥梁,确保将各IT管理系统中异构数据抽取到临时中间层后进行清洗、转换、集成,最后加载到数据仓库中,成为分析处理基础,为辅助决策、分析、查询提供统一的数据依据。

因而将这些零散、复杂的数据转化为综合统计数据仓库需要的信息最关键的地方就是对数据指标进行标准化。具体分为管理层面和数据处理两个层面:管理层面即对公司内所需要的统计指标进行统一编码、统一分类、统一口径。数据处理层面则利用ETL技术构建综合数据仓库。

因此将企业的综合统计分析系统与各类IT信息管理系统建设相结合,也应具备以下三个基本的前提条件:第一统计口径统一,第二理清各个IT信息系统间的相互关系,第三严控数据源理顺信息报送顺序,实现从基础的业务数据到绩效考核指标实现的相关性统计分析。

统计分析系统预测的应用

数据准备完成后主要的工作就是进行分析与预测,针对不同的数据类型,运用相关、回归和预测等统计分析方法,建立统计模型以反映变量之间的线性依存关系。

在实际的运用中使用了线性趋势预测法,它是对观察期的时间序列资料表现为近似直线的上升和下降时采用的一种预测方法。关键是求得趋势直线,以利用趋势直线的延伸求得预测值。这种关系中对于某一现象的每一数值可以有另一现象的若干数值与之相对应。因此计算相关系数测定判别变量与时间之间关系密切程度的量,也就是说是否存在线性联系。只有存在线性联系时,才能采用这种方法进行预测。

目前统计信息系统虽然具备了一定基础,但是面对统计信息化建设这样是一个庞大复杂的系统工程还是存在很多的差距。在发展进程中也会不断出现新情况、新问题,实现传统统计工作模式向现代化方式的转变。统计部门作为信息部门要充分利用相关的应用知识,把生产经营中的各类指标要素进行优化,充分融合统计工作的流程中去,促进统计工作方式的转变,提高统计工作水平。

图1 逻辑架构图

图2 数据流关系图

猜你喜欢
数据仓库数据源信息管理系统
三维可视化信息管理系统在选煤生产中的应用
信息管理系统在工程项目管理的应用
基于数据仓库的数据倾斜解决方案研究
基于三维TGIS的高速公路综合信息管理系统
基于数据仓库的住房城乡建设信息系统整合研究
SaaS模式下的房地产中介公司信息管理系统
Web 大数据系统数据源选择*
基于不同网络数据源的期刊评价研究
探析电力系统调度中数据仓库技术的应用
基于数据仓库的数据分析探索与实践