基于Spark的学生学习数据挖掘

2021-09-23连惠群

电子技术与软件工程 2021年12期

连惠群

（福建警察学院福建省福州市 350007）

1 引言

对高校各门科目的学习，很多时候学生和老师都无法了解知识薄弱环节，往往存在学生不能有效学习，老师无法进行针对性辅导的现象。现在各高校有很多在线教学系统、练习系统和考试系统可供使用，但很多系统只能针对单次考试的分析，学生答题情况也不能完全保存。本文以公安知识学习为例，为了更好的服务学员及教员，将全面地保存学员们的答题情况，把每次的错题保存，以及记录每位学员各个模块具体的修炼分值，让学员了解自己的薄弱环节；将每道题答题次数和错误数进行记录；另外根据学员平时练习的情况，运用Spark决策树回归分析算法进行数据挖掘，预测最终得分，提前预判，做好前期辅导准备工作。

2 相关工作

关于答题情况数据挖掘，李永举[1]以大学本科线性代数成绩为例，在运用Python的基础上运用聚类和关联规则算法对其进行挖掘与分析，找出试卷中知识点之间的关联规则。王萧[2]分析在线测评数据，提取学生的学习特征，使用聚类算法将学习特征相同的学生聚类，根据学生的学习特征抽取学生之间的关系，生成学生知识图谱。本文主要从服务学员和教员出发，让学员和教员切实知道知识点的薄弱之处，为学员切实掌握公安知识点而服务，为教员更好地服务学员，能够进行针对性地辅导而服务。