胡新+黄佳彬+章波
【摘要】 随着互联网、移动通讯技术的不断发展,特别是电商、社交、即时通讯平台的活跃,以及企业信息化、智慧城市、智能电网的快速建设,近几年来,视频、图像数据呈现爆炸式增长,与此同时,图像处理技术也得到快速发展,特别是大数据技术的应用为大规模图像处理提供了技术可行性。本文就图像技术的现状、大数据体系、大数据图像处理技术进行分析论述,并结合智能电网应用场景进行了思考与分析。
【关键词】 图像技术 大数据 Hadoop 智能电网
引言
当前,大数据分析已经成为各行业的一个重要决策支撑手段,大数据技术能够简化处理海量数据,其大规模集群数据处理开源软件框架Apache Hadoop,可以可靠地依靠成千上万规模节点处理PB级数据。利用大数据技术实现图像处理,能够突破传统图像处理技术瓶颈,快速实现大规模图像数据的处理计算,给企业带来巨大价值。
一、图像技术现状分析
1.1存储技术现状
目前国内外图像存储解决方案有两种,分别是图像存储至数据库和图像存储至硬盘。在海量图像规模下,传统数据库承载太多图像会导致数据库容量和效率成为极大的瓶颈,常见做法是图像存储在硬盘,图像路径存储至数据库。存储容量方面常采用增加专业的磁盘阵列,磁盘柜或者高级的光纤盘阵、局域网盘阵等方式解决,而提升访问效率方面常采用squid缓存和镜像方法。
1.2应用技术现状
图像应用技术随着互联网浪潮不断发展,按应用领域不同可归纳为物理设备应用、基础软件应用、智能分析应用、智慧分析应用四个应用层次,其技术实现难度逐层增加。……