云计算下大数据均衡调度方法研究

孙逸敏

摘要：随着互联网大数据的应用，相关机构提出云计算概念。而基于云计算的资源调度一直是此领域的主要研究方向之一。随着社会网络资源数据共享深入，基于云计算技术的大数据均衡调度成为领域难题，传统调度方式多数根据数据完成时间和任务完成时间，做不到真正的大数据资源均衡调度。文章针对传统调度方式弊病，提出TPO集成法，通过云技术建模、波动算法、节点检测等技术解决传统问题，并以实验的方式检测效果。

关键词：大数据；均衡；资源调度

中图分类号： F272 文献标识码： A 文章编号：1009-3044（2018）01-0011-02

近几年，随着互联网网络规模不断扩大，网络数据交互也更加广泛。而网络社交、搜索网站、商务代表一系列新型网络应用的开发，大量互联网数据整合和数据汇聚现象，使数据处理应用量和需求量呈井喷式爆发，互联网所要分析或处理的业务量也日益繁重。例如国外社交软件Face book的中央处理系统平均每天要接收30亿条以上讯息和将近1000T网络数据；而我国阿里巴巴旗下淘宝网，每天要处理超过900T数据。大量数据的产生和应用极速加快了“大数据时代”的到来。针对于海量数据服务，如何将这些数据进行有效均衡调配，为网络用户提供方便快捷的网络搜索服务，成为互联网当前所面临的重要问题。在这种情况下，一种以分布式计算为核心的新型计算技术诞生，这就是云计算技术。

随着网络信息技术的普及，“云计算”已经渐渐得到社会各界的广泛关注。……