Hadoop实验教学平台与课程体系设计
2020-04-22刘芳
课程教育研究 2020年5期
【摘要】首先对大数据管理和分析能力的人才需求进行了分析,简要介绍了Hadoop的主要学习框架。然后介绍了Hadoop大数据实验教学平台的搭建流程,分析并设计了Hadoop课程的一系列实验项目。最后介绍了Hadoop实验室的开放式管理模式的改革方案。
【关键词】Hadoop 实验教学 大数据
【中图分类号】G64 【文献标识码】A 【文章编号】2095-3089(2020)05-0253-02
1.引言
目前,大数据的分析和处理技术有:数据库的大规模并行处理、可扩展的存储系统、分布式的文件处理系统、分布式数据库、数据挖掘、云计算等。具有大数据处理和分析能力的人才需求正在逐年增长,人才需求的职位主要有大数据分析师、大数据系统架构师、大数据系统管理员、大数据平台开发工程师等。
Hadoop作为一种分布式的大数据软件开发平台,主要对大数据进行分布式存储和快速计算;Hadoop生态系统中的Hive支持SQL使Hadoop吸收了关系型数据库的优点,便于用户对数据进行优化管理[1]。因此,为了培养具有大数据管理和分析能力的人才,对Hadoop的实验教学平台和课程体系的研究具有重要的意义。
目前国内具备Hadoop等技术的人才稀缺。高校需要着重培养熟练掌握大数据处理和分析能力的人才[2-5]。本文对Hadoop软件开发平台的理论教学内容进行了分析,包括Hadoop课程的实验教学平台的搭建,Hadoop分析和处理大数据的实验项目的设计,以此培养学生掌握使用Hadoop大数据软件开发平台的方法。为大数据处理和软件开发相关的后继课程的学习奠定基础,培养具有大数据管理和分析能力的人才。……
登录APP查看全文
