大型离线数据分析课程整体设计
2021-12-02孙燕飞
科学与生活 2021年25期
关键词:职业能力
孙燕飞

摘要:本文从课程性质与任务、课程教学目标设计、课程内容设计、课程考核等几个方面对大型离散数据分析课程进行了整体设计与研究,旨在培养学生分析问题和解决问题的能力、职业道德素养及可持续发展能力。
关键词:Hive;课程设计;职业能力
一、课程性质与任务
课程在软件技术专业人才培养方案中处于职业能力类课,属于专业必修课。本课程基于开源Hadoop大数据生态圈的主流离线分析工具Hive和Pig,通过技术讲解和案例实战相结合的方式,介绍了海量数据离线分析的技术方法。主要包括Hive数据库表、基于HiveQL的常规操作、视图、索引和Pig等数据处理分析和基础工具知识,Hive函数、Pig Latin编程、ETL工具Sqoop和工作流引擎Oozie等相关高级技术,以及实际项目案例。
通过本课程的学习和实训,主要使学生掌握大数据离线分析所需的主流技术,培养学生良好的职业道德,增强团队协作能力和沟通交流能力,培养学生的创新精神和实践能力,以适应现代生活的需要,适应未来职业的需要。
二、课程教学目标设计
1.总体目标
本课程的目标是培养学生掌握大数据离线分析所需的主流技术,掌握Hive的基本操作以及Sqoop、Pig、Oozie等工具的使用方法,并具有一定大数据离线分析的能力。
2.知识目标
本课程的知识目标包括:
(1)掌握大数据离线分析基础知识;
(2)掌握Hive中表的基本操作;
(3)掌握Hive中视图、索引和函数的创建和使用。
(4)掌握pig的安装、运行以及语句的使用。
(5)掌握Sqoop的安装以及应用。
(6)掌握Oozie的安装以及应用。……
登录APP查看全文
