莫伟生
(深圳市爱华勘测工程有限公司,广东 深圳 518111)
为实现土地信息统筹智能化自动化管理,常面对规划、现状、地下管线和土地权属等多源异构土地信息数据的融合利用难题,借助大数据的理论和方法,就海量的多源异构的土地信息数据进行梳理与融合技术的研究,实现了多源异构数据的融合利用。该文从大数据自动关联、大数据的清洗、抽取与变换以及大数据的归一化与聚合3项关键技术介绍面向土地信息统筹管理大数据的梳理与融合技术。
针对多源异构的土地信息统筹管理大数据,研究面向聚合主题和目标的关联数据接入方法,进行信息抽取,提出面向位置、语义、关系、时间和尺度5个维度的土地信息统筹管理大数据聚合模型[1]。根据聚合分析主题目标,考虑土地信息统筹管理数据多种类型、不同结构特征,对结构化地理大数据进行抽取、转化、清洗等一系列数据挖掘的前期处理,对于半结构化和无结构地理大数据采用信息抽取,从异构数据源中自动抽取信息得到候选知识单元。根据土地信息中多源地理大数据不同的结构特征,分别进行不同的处理,如下所述。
结合土地信息统筹管理大数据聚合目标,对结构化数据按照抽取-转换-清洗3个步骤进行特征提取。
1.1.1 抽取
从地理大数据中提取所需要的数据,常采用空间数据和属性数据抽取2种方式。……