◆刘雷 胡文利

高职院校教育信息爬取与数据分析研究

◆刘雷 胡文利

（江西工业职业技术学院 江西 330039）

基于高职院校的信息爬取采用了一种综合数据爬取方法，该方法使用了深度优先及反链优先策略相结合技术，开发了一个根据关键词检索高职教育教学信息的检索系统，为高职院校的信息爬取及检索工作提出了一种方法，以供相关研究参考。

高职院校；网络爬虫；爬虫分类；高职教育

1 引言

在当代大数据背景下，各行业对数据获取的准确性提出了越来越高的要求，在这种趋势下，需要优化检索方法以精准地获取目标的准确信息。从现阶段来看，各大搜索引擎技术可以满足部分需求，但是搜索引擎所获取的数据大多被广告和其他不需要信息所占满，如何精准获取到自己想要的数据，特别是行业数据，现阶段可以利用爬虫技术进行分析，通过网络爬虫技术，提高数据检索质量。

在此背景下，如何利用深度挖掘数据技术，以便使优质教育教学资源实现共享。通过使优质的教育教学资源的共享能够逐渐缩小到不同地域、不同学校，从而减少资源的差异性。为了提升高职教育教学的质量，利用深度挖掘数据技术，以便使优质教育教学资源实现共享。

2 爬虫分类

现阶段，网络类型的爬虫有很多种类，实现的方式方法大同小异，现将网络上典型的两种爬虫进行分类分析，包括通用型爬虫和聚焦型爬虫。

2.1 通用类型爬虫

通用型爬虫的爬取步骤一般分为四个：