基于云存储的海洋数据存储策略研究

张 弛，龚茂珣

（国家海洋局东海预报中心 上海市 200081）

1 研究背景

1.1 现状分析

随着海洋观（监）测数据工作的不断发展，海洋数据具有分布面广、要素种类多、传输频率高等特点，如实时海洋数据以分钟、小时级别传输；文件传输类别异构化，如同时接收海洋遥感数据、海洋观测数据、海洋调查数据等；数据传输文件海量化，相当数量级的海洋观测点几乎同时向海区中心发送资料。

然而现有海洋数据存储体系是将单独服务器作为数据存储设备，由于该服务器负责接收海洋数据的同时需将数据进行解析并分发至各个不同目标地址的存储服务器，随着海洋数据以分钟级、小时级等多个时间传输频率源源不断地传输至该服务器，由于该服务器频繁的计算及分配剩余存储空间，导致I/O调度过于频繁，最终可能导致数据文件积压、数据处理延时等问题，严重影响了海洋数据存储体系的工作效率。针对此类问题，本文围绕研究海洋数据的结构特点以及提高现有传输硬件设备存储效率2方面进行开展[1]。

1.2 问题提出

当部分服务器进行接收数据并分配存储空间等高负载作业的同时，传输网内仍存在负载较轻的服务器，比如发布webservice、运行单一监控程序、邮件服务器等，以上现象说明数据传输网内服务器集群存在负载极不均衡的情况。该情况极有可能因负载较重的服务器死机从而降低整个海洋数据存储系统工作效率。如何对海量的多源异构海洋数据在合理利用现有硬件资源的基础上进行统一存储，以提高存储系统的负载均衡性和存储的安全性将成为海洋数据存储业务发展的方向。……