基于OPC框架的高效计算服务应用①

2016-10-14 07:25:16张春平
计算机系统应用 2016年9期
关键词:设备

张 琦, 张春平, 杨 志, 刘 铭



基于OPC框架的高效计算服务应用①

张 琦, 张春平, 杨 志, 刘 铭

(国家电网电力科学研究院,南京 210000)

大数据计算是当前云计算研究的热点之一. 在电力信息化、精益化的建设过程中, 业务复杂度不断提高, 数据量与日俱增, 这使得传统的数据加工性能日益劣化. 在复杂的业务场景下, 由于海量的电力数据, 使得数据指标加工计算的效率非常低下, 传统方式的加工任务经常耗时数个小时, 难以满足用户的体验要求. 为了解决这个问题, 全面提升数据指标加工任务效率, 基于对象化并行计算(Objectification Parallel Computing, OPC)框架实现了一种高效计算服务, OPC是分布式并行内存计算框架. 在OPC框架中, 大数据集被拆分成小数据集, 并分布式地存储在集群内存中. OPC计算任务借鉴了分而治之和归并树的思想, 将计算任务分成两个阶段: 本地计算任务和计算结果收集汇总. 计算任务基于本地计算数据进行计算, 得到本地计算结果, 然后将计算结果通过收集结点进行汇总合并, 最后得到最终结果. OPC框架技术应用在国家电网公司工程生产管理系统(PMS)中, 应用效果表明该技术稳定、可靠, 性能提升几十至数百倍, 可满足高效计算需求.

大数据; 高效计算; 对象化并行计算; 分布式

大数据计算是物联网和云计算的研究热点与挑战之一, 其目的是根据海量数据中相应的维度进行统计计算出相应指标信息[1]. 相比于传统的数据仓库应用, 大数据计算分析具有数据量大……

登录APP查看全文

猜你喜欢
设备
谐响应分析在设备减振中的应用
调试新设备
当代工人(2020年13期)2020-09-27 23:04:20
基于VB6.0+Access2010开发的设备管理信息系统
基于MPU6050简单控制设备
电子制作(2018年11期)2018-08-04 03:26:08
广播发射设备中平衡输入与不平衡输入的转换
电子制作(2018年10期)2018-08-04 03:24:48
食之无味,弃之可惜 那些槽点满满的可穿戴智能设备
500kV输变电设备运行维护探讨
工业设计(2016年12期)2016-04-16 02:52:00
HTC斥资千万美元入股虚拟现实设备商WEVR
IT时代周刊(2015年8期)2015-11-11 05:50:37
Automechanika Shanghai 2014 之“看” 汽保设备篇
如何在设备采购中节省成本