基于数据挖掘与分析的大学生就业指导

罗博炜

(五邑大学 智能制造学部， 广东 江门 529020)

0 引言

要想实现成功就业，大学生需要对就业环境进行精准扫描，认识就业新趋势；主动转变就业观念，做好能力前置培养以适应和把握就业新趋势。为此，本文依托互联网平台，运用大数据技术，构建了以大数据信息采集为基础的“互联网+就业指导、互联网+求职招聘、互联网+就业评价”系列分析方法，可有效帮助大学生及时学习有效技能、明确就业方向，助力我国劳动力供给侧结构性改革，实现十九大报告“提高就业质量，实现高质量就业”的目标。

1 网络爬虫获取招聘信息

1.1 需求分析

网络招聘凭借其信息传递速度快、空间距离小、成本低廉等优势，已成为招聘者发布和应聘者获取信息的主要渠道。因此，对网络招聘信息进行分析研究，了解社会和相关行业的需求特点与趋势，对大学生求职和就业指导有着非常重要的意义。爬虫技术应用广泛，在科学研究、Web安全、产品研发、舆情监控等领域均大有可为。职业需求分析数据也可以通过爬虫技术从网络招聘上抓取，这里以BOSS直聘为实例，对如何使用网络爬虫技术高效地获取信息进行深入探讨与研究[1]。

首先需要从该招聘页面中获取每一页的岗位职位名称、薪资、城市、工作经验限制、学历和公司名称等基本信息，以及每条招聘信息内页中细化的岗位职责和公司福利等详细信息。

另外，对于访问 Web 时直接响应的数据(就是response内容可见)，我们使用Urllib，Requests 或Scrapy框架爬取。……