数据中台的通用体系架构研究

2021-01-07 00:23:17吕军郭健罗旭
科技创新导报 2021年22期

吕军 郭健 罗旭

摘要:进入信息时代,随着数据产业的蓬勃发展,数字化建设如火如荼。“数字中国”“互联网+”等国家战略项目已在资源、可持续发展、环境以及行政办公等领域取得了良好的效果。数据是资产、资源,但如何把数据资产、数据资源转化为社会收益和企业利润,还需要多方探索。当前,机构和企业不再建设从源数据采集到分析应用的烟囱式系统,更倾向于数据集中采集、存储,并应用分层建设。这种方式一方面有利于应用系统的快速部署,另一方面也保证了数据的集中管理与运营,体现数据的资产、资源属性。数据中台的出现弥补了数据开发和应用开发之间由于开发速度不匹配而出现的响应力不足等问题。本文主要对数据中台的通用体系架构进行了简单的探讨,以供相关人员参考。

关键词:大数据平台 数据中台 数据治理 体系架构

Research on General Architecture of Data Center

LV Jun  GUO Jian  LUO Xu

(Sichuan Bangchen Information Technology Co., Ltd., Mianyang City,

Sichuan Province, 621000 China)

Abstract: In the information age, with the vigorous development of data industry, digital construction is in full swing. National strategic projects such as "Digital China" and "internet +" have achieved good results in the fields of resources, sustainable development, environment and administration. Data are assets and resources, but how to transform data assets and data resources into social benefits and corporate profits needs to be explored in many ways. At present, organizations and enterprises no longer build chimney systems from source data collection to analysis and application, but prefer centralized data collection, storage and hierarchical application construction. On the one hand, this method facilitates rapid deployment of application systems. On the other hand, it ensures centralized management and operation of data and reflects the asset and resource attributes of data. The emergence of data center makes up for the lack of response between data development and application development due to the mismatch of development speed. This paper mainly discusses the general architecture of data center for reference.

Key Words: Big data platform; Data center; Data governance; System architecture

大數据蓬勃发展的背景下,各行各业越来越重视大数据给企业带来的业务革新动力,希望借助数据驱动业务新发展。企业在此背景下积极探索数据管理和数据应用,完成了以“一体化数据中心、一体化数据管理、一体化数据分析”三个一体化为核心的数据中心建设,为各业务部门提供高质量的数据以及丰富的数据分析手段,为各级人员管理决策提供了有效支撑。[1]

但我们也应当看到,目前的数据中心,无论是专题、报表或取数,还是烟囱式数据生产模式或者是项目制建设方式,如果当初模型的扩展性设计的不好,或者时间太紧,或者出于系统稳定的考虑,致使数据模型扩展性较差。……

登录APP查看全文