河北移动三域大数据融合建设思路

梁杨，赵志伟，王智宏( 中国移动通信集团设计院有限公司河北分公司，石家庄 0500； 中国移动通信集团河北有限公司，石家庄 0500)



河北移动三域大数据融合建设思路

梁杨1，赵志伟2，王智宏1
(1 中国移动通信集团设计院有限公司河北分公司，石家庄 050021；2 中国移动通信集团河北有限公司，石家庄 050021)

摘 要本文以河北移动大数据相关建设经验为背景，对河北移动在规划建设中积累的先进经验和教训进行总结和分析，并提出针对性建议，最后提出河北移动三域大数据融合的建设思路。

关键词大数据；三域；IT支撑系统；资源池

近几年，河北移动一直以B域（即业务支撑域，简称B域，下同）的经分系统为核心建设大数据平台，尽量减少系统数量，充分利用现有资源，减少系统间数据的复杂度，同时结合公司运营中的重点、难点问题，逐步进行了一些基于大数据分析的应用开发和系统建设。

1　河北移动跨域融合建设情况

本文基于河北移动在大数据方面的建设，从业务、基础能力架构、组织架构3个方面分别进行阐述。

1.1 业务

流量经营战略地图是将流量经营的关键要素进行图形化分解的一种全息化经营视图，依据空间地域掌控营销范围实现精确微区域营销，场景以战略地图为“显微镜”，深入透视微区域问题，排查问题找寻解决措施，通过跨域分析促进精细化工作的落地执行，实现流量经营的关键要素的可视化、网格化，有效推动流量经营的持续发展。

互联网业务分析基于经分系统，通过打通B域、O域（网管支撑域，简称O域，下同）接口，通过采集网络信令并通过爬虫获取客户上网信息，并结合用户开销户和业务订购信息进行统计分析、流量监控，更新客户上网策略；目前系统在建设中。

事件营销基于经分系统，通过打通B域、O域接口，获取网络侧实时信令消息，分析用户行为变化，及时向用户推荐相应产品，实现营销的及时推送，建设基于事件的营销分析；目前正在进行试点工作。

业财融合涉及到B域、M域（管理信息域，简称M域，下同）之间多个系统的协作，通过引入M域成本数据，实现产品和客户的成本精细分摊，为解决市场运营成本短板提供数据支撑。通过对业务线和财务线的业务流程分析，关联两条线的统一分析指标，加强分析的针对性和有效性；并通过钻取和挖掘等技术手段，对差异进行定位和监控，形成管理闭环，贯通业务流程，以达成降本增效、提升效率、规避风险的目标。

1.2 基础能力架构

河北移动在近两年建设中不断优化系统基础能力架构，为新型大数据分析工作提供保障。

从基础资源层面、应用层面、管理层面统一协同考虑对B、O、M三域大数据融合建设，积极协同建设三域资源池，不断提升X86化比例、统一分布式数据库、虚拟化软件的选型，三域跨域数据统一采集并做去重处理等。

建设基于X86架构的经分历史数据库，通过降低建设成本，延长历史数据保留时间，有效提升历史数据的使用价值，并为数据仓库提供安全保障。

1.3 组织架构

河北移动已经建立了跨部门的虚拟组织架构，通过明确各部门的分工，协同制定企业IT运营系统集中化总体目标及演进策略；部署企业IT运营系统集中化工作；统筹协调企业IT运营系统集中化所需资源；决策企业IT运营系统集中化中的重大事项。

2　以往建设中的问题

河北移动在以往的系统建设中曾经出现过问题，通过剖析，分析出类似建设中的问题以及大数据建设过程中的困难所在。

2.1 以往建设问题

前期O域某系统的建设与大数据平台的建设存在很多类似的特点，某系统在近几年的建设过程中，出现的问题值得借鉴。

(1) 规划考虑不全面：某系统定位为支撑全业务运营，实现网络资源数据的全生命周期管理，但没有与业务支撑、计划工程管理领域的相关系统统一规划，建设过程中业务开通长流程难以贯通。

(2) 演进思路不清晰：某系统的建设目标是替代专业网管的资源管理功能，但其与专业网管的分工原则一直不清晰，长期以来专业网管仍承担较多的资源管理方面的建设要求，建设过程中专业网管与某系统的接口难协调，接口规范不标准。

(3) 技术架构不先进：某系统数据源大部分为手工录入，目前从专业网管同步资源数据后做资源比对，由于统一采集层方案一直以来未明确和建设，造成资源数据采集自动化程度低，人工维护工作量巨大，数据质量长期存在不及时、不完整、不准确的问题，难以支撑实际生产管理的需要。

2.2 大数据融合建设难点

大数据融合建设的难度体现在：存在数据整合困难、准确性提升需要系统和管理双重保障的特点；大数据分析应用范围又涉及多域应用，范围极广，必须有专业化的团队支撑服务。

3　三域大数据融合发展思路

根据上述的建设经验，河北移动在大数据方面建设已经逐步渗透到各个环节，并在相关方面取得了一定的建设成果。

(1) 系统建设方面：由统一门户向开放式平台演进；由建单的数据封装向统一数据服务平台演进；由分散的基础平台向统一的管理平台演进；由大小型机逐步向X86化演进；由结构化处理能力向非结构化处理能力演进。

(2) 业务应用方面：开展了流量经营战略地图、互联网分析、事件营销、业财融合、历史库等跨域融合类业务。

(3) 资源整合方面：协调多个部门，融合B、O、M三域数据，整合基础大数据资源；建立大数据资源管理部门，明确各部门职责和分工。

根据建设中遇到的问题，建议在大数据建设过程中统筹考虑，避免重蹈O域某系统建设的覆辙。

(1) 加强数据的标准化，归一化、集中化管理。上百个系统的管理分布在不同的部门和专业，数据规范制作没有统一标准，只有不断建立有效的把控手段，才能从源头上保证数据的可用性。

(2) 强化专业服务。一定要由专业人员或组织来做（避免兼职和非专业）。也许采用专业部门和第三方专业咨询相结合的方式是一种更好的选择，但第三方专业咨询一定要考虑长期战略合作与个性化合作相结合。

(3) 加强三域分析平台的统一规划。O域的综合分析系统、M域的财务主数据平台、B域的经分系统，在建设规划过程中要综合考虑。

依据河北移动经分系统多年的建设经验，大数据建设可以从两个方向进行：一是从上到下，由应用带动数据；二是自下而上，由数据带动应用。河北移动根据自身的建设经验提出了通过应用与数据互驱的方式进行三域大数据融合建设。

3.1 应用带动数据

结合公司运营中的重点难点梳理分析应用需求，梳理相关数据需求，进而推动数据的标准化、自动获取和集中管控，以及相关基础软硬件能力的建设。这也是目前大数据平台建设的主要思路。

3.2 数据带动应用

加强数据的标准化管理。大数据分析的基础是数据获取，因此各种基础数据的归一化、标准化管理至关重要，但为了避免先建设后改造所带来的重复投资和时间限制，要不断加强入网数据的准入管理，通过对数据准入管理的把控，提升数据的标准化和集中化管理。

逐步建立公司级的数据分布地图。在标准化的基础上，逐步建立起公司的标准化数据分布地图，即哪些系统存放着哪些数据，哪些数据是标准化和非标准化的，以及数据的重要性权重，通过建立数据分布地图，实现数据的分层级管理体系。

加强数据节点的定位。从管理角度要考虑真正有效的数据节点所处的位置或环节（系统运营、职责分配、工作运营、决策支撑各环节的数据生成节点等，以及与现有的数据生成节点的关系）。

在数据分布地图的基础上进一步建立数据需求地图，数据需求地图除了包含数据分布地图的部分内容外，还应该包括公司主要管理流程中产生的数据，而这些管理流程可能在实施过程中并没有进行信息化处理，但这些潜在的数据会对公司的运营决策产生重要影响，因此通过明晰数据需求地图，不断加强此类流程数据的IT化、可管理化和可使用化能力，丰富数据地图的范围。

3.3 应用与数据互驱

鉴于以上的分析，河北移动的总体发展思路是应用与数据互驱演进：以跨域分析应用的梳理为突破，带动B、O、M三域数据的集中管理；以三域数据的归一化梳理和集中，为更多的分析应用奠定基础。

表1　河北移动三域近期分维度融合建设规划

根据河北移动规划，将以“资源整合，数据集中，应用整合”原则为指导，打造三域融合的一体化支撑能力，资源池重点关注资源整合层面，而大数据平台对应于数据集中和应用整合层面。IT支撑系统云资源池将分阶段分维度整合三域内及域间的IT基础资源（如表1所示），后续大数据平台所需的IT基础资源将由融合后的IT支撑系统云资源池统一提供（如图1所示），因此，IT支撑系统云资源池是大数据平台的物理支撑平台。大数据平台定位为建设统一的企业运营数据中心，以提供统一、标准、开放、可共享、可控制的数据服务为目标，前期重点建设非结构化数据处理能力，完成数据处理框架搭建，后期以诸如流量经营、业财融合等成熟的应用专题为切入点，逐渐丰富数据应用。

河北移动大数据平台架构：面向互联网化的转型需求，结合去IOE（即以IBM小型机、Oracle数据库、EMC存储阵列为代表的传统IT软硬件架构模式）化进程，进行系统架构升级改造，开展大数据平台转型建设。构建信息整合、数据资产、应用和运维管控等扁平化中心，实现应用与数据深度解耦，数据处理多样化，硬件和数据资源池化。

针对大数据的目标架构和特点，在近两期的建设中，充分考虑了新技术的引入和应用，主要的关键技术体现在小型机的X86化进程中以及部分新功能模块建设中所运用的数据库相关技术，MPP关系型数据库（如深度分析库、历史库等）以及Hadoop（如互联网分析、云化ETL、爬虫等），通过分析研究，对两种技术的特点和应用场景进行了对比，如表2所示。

图1　IT支撑系统私有云资源池融合规划演进

图2　河北移动大数据平台架构

表2　MPP与Hadoop技术对比

在三域大数据融合建设进程中，要加强各类大数据应用的有效性和时效性管理，建立应用的全生命周期管理手段，避免无效的应用长期占用系统资源甚至是运维资金。

与此同时，建立公司级的数据运营团队十分必要，通过专业的运营团队，分析数据中隐含的决策支撑信息，建立分析的各种模型，定期形成分析结果的预评估，将经过预评估的模型通过软件开发进行落地实施，并在实施的过程中不断完善和修正，力争实现运营效果对基础数据管理能力的闭环反馈。

4　结论

三域大数据融合旨在数据资产规范化、显性化的基础上，逐步由内而外发掘数据价值，最终通过资产经营充分实现其价值，同时企业自身也实现“数据驱动的以用户为中心的运营模式变革”。

基于数据运营价值体现的要求，以跨域应用建设为契机，逐步完善大数据平台能力；新运营体系的完善必然要经历螺旋式上升的阶段，很难一蹴而就。

参考文献

[1] 赵晶. 针对运营商的大数据建设方案研究[J]. 电信工程技术与标准化, 2015(3).

[2] QB-Y-045-2014, 中国移动省级NG2-BASS(v5.0)技术规范总册[S].

Thinking about the construction of fusion of big data in three domains of China Mobile Group Hebei Co., Ltd.

LIANG Yang1, ZHAO Zhi-wei2, WANG Zhi-hong1
(1 China Mobile Group Design Institute Co., Ltd. Hebei Branch, Shijiazhuang 050021, China; 2 China Mobile Group Hebei Co., Ltd., Shijiazhuang 050021, China)

AbstractBased on the big data-relevant construction experience of China Mobile Group Hebei Co., Ltd., this article summed up the advanced experience and analyzed the lesson during company operation, and then proposed corresponding suggestions. Furthermore, the thinking about the construction of fusion of big data in three domains of the company is put forward.

Keywordsbig data; three domains; IT support system; resource pool

News

英特尔展品亮相2016年全美零售业联盟年度大会

1月20日，全美零售业联盟年度大会暨博览会期间，英特尔公司展出了现已上市的全新零售产品和创新应用，通过物联网为消费者打造全新购物体验，并使零售商更好地理解和贴近顾客。

展示包括Nordstrom 3D数字脚型扫描解决方案；Brooks Brothers“量体裁衣”解决方案；Capgemini交互式3D建模；COOP未来超市；Mirium魔镜；Boulanger虚拟墙壁。

（徐扬)

收稿日期：2015-04-17

中图分类号TN915

文献标识码A

文章编号1008-5599（2016）02-0025-06