高校异构数据集成方案设计

文/王欢 刁喆

随着高校信息化建设进入深水区，如何整合不同来源的数据并在统一平台上使用，成为当前高校大数据管理平台建设面临的重大挑战。文章提出了一种基于消息传递的异构信息接入及标准化处理的方法和相应的软件架构。

异构数据集成方法

数据集成是将互相关联的分布式异构数据源集成到一起，使用户能够以透明的方式访问这些数据源。异构数据源主要有自治性、分布性和异构性三个特征。目前，对异构数据资源进行集成和管理的方法主要有模式集成和数据复制。

模式集成是人们最早采用的数据集成方法。其基本思想是，在构建集成系统时将各数据源的数据视图集成为全局模式，使用户能够按照全局模式透明地访问各数据源的数据。全局模式描述了数据源共享数据的结构、语义及操作等。用户直接在全局模式的基础上提交请求，由数据集成系统处理这些请求，转换成各个数据源在本地数据视图基础上能够执行的请求。模式集成方法的特点是直接为用户提供透明的数据访问。由于用户使用的全局模式是虚拟的数据源视图，一些学者也把模式集成方法称作虚拟视图集成方法。典型的模式集成方法包括联邦数据库和中间件集成。

数据复制是指将各个数据源的数据复制到与其相关的其它数据源上，并维护数据源整体上的一致性、提高信息共享利用的效率，也被称为实体化方法。……