邹 丹,王 喆,马小宁,孙思齐,王沛然
(中国铁道科学研究院集团有限公司 铁路大数据研究与应用创新中心,北京 100081)
数据融合是大数据领域一个重要的研究方向,指集成多个数据源以产生比单一数据源更有价值的信息的过程。数据融合最早产生于军事领域,后来广泛应用于多影像复合、无人驾驶、图像分析与理解、目标检测与识别等领域[1]。目前,铁路行业在跨系统多源数据融合方面的研究相对较少,在多源数据融合的过程中,面临着数据不准确、不一致、不完整、数据要素分散等问题[2],为解决这些问题和提高数据融合效率[3],需要构建统一的多源数据融合架构。
本文基于铁路数据服务平台(简称:平台),提出铁路多源数据融合架构,以数据流为主线,将铁路数据融合的主要工作环节与平台功能建立对应关系,构建铁路数据融合模型,为实施跨专业、跨系统的数据融合提供参考。
铁路数据服务平台是铁路行业自主研发的一站式铁路大数据解决方案。该平台是铁路数据集中管理、大数据分析的公共基础设施,面向铁路数据的采集、存储、处理、分析和共享,采用分布式架构构建。平台可实现海量结构化与非结构化数据接入、PB 级数据离线分析、TB 级数据实时分析、数据多维分析、自助分析、数据可视化等功能。此外,建立了数据资产管理制度和标准化管理流程,规范常态化数据资产管理活动,保证数据获取和使用的一致性、准确性和安全性。……