基于应用型高校的大数据实验室建设研究

蔡宇

摘要：随着互联网、移动互联网、云计算、企业级软件的快速发展，企业数据量已呈几何倍数增长，大数据技术应运而生，高校大数据实验室的建设势在必行。该文首先对高校大数据实验室建设的必要性进行了分析，然后列举了目前高校实验室中存在的问题，在此基础上，阐述了大数据实验室建设的理念，并提出大数据实验室的建设方案。

关键词：大数据；云计算；大数据实验室；理念；方案

中图分类号：TP393 文献标识码：A 文章编号：1009-3044（2018）17-0001-02

1 必要性

移动互联网、电子商务以及社交媒体的快速发展使得企业需要面临的数据量成指数增长。在中国以Hadoop、Spark、storm、数据库一体机以及内存计算技术为代表的大数据相关技术，从互联网企业，到电信、金融、政府这样的传统行业都在大规模应用，特别互联网公司利用大数据进行大数据云存储、大数据分析和深度学习，应用场景也在逐渐拓展，从结构化数据的分析，发展到半结构化、非结构化数据的分析。

目前，许多高校申请了云计算与大数据专业，未来相关专业的学生需要分别从原理、技术与应用等不同的角度掌握大数据分析的理论与分析方法，除了课堂学习，还需要通过实验来加深理解和提高实际应用操作能力。而大数据相关实验所需要的算法、计算环境以及数据等，都无法在现有的实验室中完成。因此，建设大数据实验室是十分必要的。

2 目前高校实验室中存在的问题

目前高校现有的实验室中普遍存在以下问题：