庞丽，彭立伟，余豪，夏童，赵付英

（1.西南石油大学网络与信息化中心，成都610500；2.西南石油大学机电工程学院，成都610500；3.西南石油大学电气信息学院，成都610500；4.西南石油大学地球科学与技术学院，成都610500；5.西南石油大学化学化工学院，成都610500）

0 引言

随着高校的扩招，社会学历普遍提高，大学毕业生人数逐年上涨，大学生就业形式也变得更加严峻，如何及时可持续性的获取有效就业信息，并加以分析做出相应决策对于大学生而言显得尤为重要。通过手动搜索招聘网站、学校/企业/事业单位官网、微信公众号、各省市人力资源网等发布的招聘信息，可以获得海量的就业信息，然而这种方式都需要到相应网站翻页查找，重复的在不同网站之间切换，存在耗费时间长、搜索速度慢、信息获取不及时、不利于集中分析统计等缺点，导致大学生容易错过适合的岗位信息。针对目前的这种情况，本文提出了基于Python的就业信息获取与分析的方法，以期为大学生搜索分析就业信息提供一定的参考价值。

1 网络爬虫简介

网络爬虫又称为网络蜘蛛，是一种按照一定的规则，自动抓取万维网信息的程序或脚本[1]，基本原理是模拟计算机对服务器发起Requests请求，然后接收服务器端返回的Response内容对其进行解析，以提取所需信息。根据网络爬虫爬取的对象和范围不同可将其分为通用网络爬虫和聚焦网络爬虫（即主题网络爬虫）[2]，其中，通用网络爬虫爬取目标范围广，通常用于搜索引擎；……