张笑青 蒋慧

摘要：该文基于Scrapy爬虫技术采集慕课网站（大型开放式网络课程）的视频资源，并使用协同推荐算法对采集的信息进行推荐和展示。主要内容包括对大学开放课程平台进行视频爬虫、数据解析、数据存储;将数据爬取的结果与Recommend算法相结合实现课程信息推荐功能;通过使用Flask框架对采集和推荐的结果进行展示，并实现视频分类与模糊查询等功能。该视频库系统可以给教师与学生提供更丰富便捷的教学资源平台。

关键词：Python爬虫;Scrapy框架;视频库;高校计算机课程

中图分类号：TP393      文献标识码：A

文章编号：1009-3044（2021）36-0037-03

开放科学（资源服务）标识码（OSID）：

1 背景

基于慕课平台的高校计算机类课程网络教学是推动高校计算机类课程教育改革、促进高校计算机课程教育网络化、科学化的有效途径。视频课程突破了传统教学活动的时间和空间限制，使课堂上枯燥的教学内容变得更加生动，同时实现了教学双方的全面交流与互动。随着慕课模式在高等教育中的普及，视频课程库的开发逐渐成为高等教育领域的重要课题之一。为了确保高校教育的质量和效果，本文对高校慕课平台下计算机类视频课程库建设过程中的相关问题进行了研究，讨论了构建视频课程库系统的方法，有助于确定与设计有效且稳健的视频课程模型相关的问题，期望能为高校计算机类视频课程的科学建设提供一些参考。

本文的各部分组织如下：首先，介绍网络爬虫Scrapy框架，它包含了Scrapy引擎（核心）、Downloader Middlewares下载器、Schedular调制器、管道Spiders解析器，并介绍其相关功能。……