BKR 体系下的数据血缘指标分析

2022-07-08 03:04:34王树明吴济胜邓梦航
电子技术与软件工程 2022年1期
关键词:体系

王树明 吴济胜 邓梦航

(1.中国烟草总公司湖北省烟草专卖局信息中心 湖北省武汉市 430030)

(2.武汉楚烟信息技术有限公司 湖北省武汉市 430030)

党的十九大报告提出要“推动互联网、大数据、人工智能和实体经济深度融合”[1]。数据成为企业数字化时代的重要资源,它以产品或服务的形态为企业创造价值,为企业转型升级发挥重要作用[2]。数据不是孤立存在的,数据从产生、处理、加工、融合、流转,到最终消亡,会形成一种关系链路,这就是数据血缘[3]。数据血缘分析就是在溯源过程中找到相关数据之间的联系,比如,当数据发生异常,需要能追踪到异常发生的原因,把风险控制在适当的水平[4]。数据血缘分析能帮助我们追踪数据的来源、处理的过程,这对于数据质量的监控、数据处理性能的调优和数据资产价值的评估等,都有非常重要的作用。

湖北烟草已经构建了一套覆盖全业务链条的完整数据中心[5],包括一体化数据存储、一体化数据管理和一体化数据分析三部分内容。然而,由于历史、管理等多方面原因,数据中心依然面临数据加工无序、数据获取与开发不规范等现象,血缘分析是规范化数据治理的一个有效工具[6]。

1 数据中心分层现状

传统数据中心的构建包括下面六个层次:最底层是部门的业务数据库(DB),数据经过抽取转换层(ETL)[7]进入操作性数据层(ODS)[8],然后经过明细数据层(DWD)[9],再进入轻度汇总层(DWA)[10],最后进入数据集市(DM)[11]。其中,每层的具体任务如表1 所示。

表1:数据中心层次结构

登录APP查看全文

猜你喜欢
体系
TODGA-TBP-OK体系对Sr、Ba、Eu的萃取/反萃行为研究
“三个体系”助力交通安全百日攻坚战
杭州(2020年23期)2021-01-11 00:54:42
构建体系,举一反三
探索自由贸易账户体系创新应用
中国外汇(2019年17期)2019-11-16 09:31:14
常熟:构建新型分级诊疗体系
中国卫生(2015年12期)2015-11-10 05:13:40
如何建立长期有效的培训体系
现代企业(2015年1期)2015-02-28 18:43:18
E-MA-GMA改善PC/PBT共混体系相容性的研究
汽车零部件(2014年5期)2014-11-11 12:24:28
加强立法工作 完善治理体系
浙江人大(2014年1期)2014-03-20 16:19:53
日本终身学习体系构建的保障及其启示
“三位一体”德育教育体系评说
中国火炬(2010年7期)2010-07-25 10:26:09