一种MySQL到HBase的迁移策略的研究与实现*

2016-08-04 02:08:09宋春红王佳斌郑力新
网络安全与数据管理 2016年13期

宋春红,王佳斌,郑力新

(1. 华侨大学 工学院,福建 泉州 362021; 2. 华侨大学 工业智能化技术与系统福建省高校工程研究中心,福建 泉州 362000)



一种MySQL到HBase的迁移策略的研究与实现*

宋春红1,王佳斌2,郑力新1

(1. 华侨大学 工学院,福建 泉州 362021; 2. 华侨大学 工业智能化技术与系统福建省高校工程研究中心,福建 泉州 362000)

摘要:随着Web2.0的到来,互联网数据快速增长。大规模数据的采集和处理及应用直接影响着用户体验,决定着企业的发展。比较传统关系型数据库和分布式非关系型数据库两者处理大数据的性能,将本地数据迁移到分布式数据库势在必行。文章分析了现有迁移工具的利弊,基于HBase数据库提出了一种有效的数据迁移策略,并依据提出的策略实现了一种半自动化迁移工具。以美国城市和方言系统CityDetail数据库数据为例,阐述了该迁移工具的工作原理并对迁移后的数据进行多次查询比较,证明了使用该工具进行数据迁移的高效性。

关键词:关系型数据库;HBase;迁移工具

引用格式:宋春红,王佳斌,郑力新. 一种MySQL到HBase的迁移策略的研究与实现[J].微型机与应用,2016,35(13):82-85,89.

0引言

Web2.0时代,网络技术飞速发展,个人与企业都在不断地创造海量数据,在新的掘金大潮中,如何利用数据以及将数据转化为有价值信息的速度,越来越成为企业成功与否的决定性因素。实现数据的快速分析,并做出指导,对数据存储提出了更大的挑战。虽然传统数据库已经发展了很多年,在企业应用方面也形成了很大的使用规模,但是其在处理大数据应用方面仍然存在不足[1]。……

登录APP查看全文