《Hadoop大数据开发基础教案Hadoop教案MapReduce入门编程教案.docx》由会员分享,可在线阅读,更多相关《Hadoop大数据开发基础教案Hadoop教案MapReduce入门编程教案.docx(4页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、第4章MapReduce入门编程初中九年级数学教案课程名称:Hadoop大数据开发基础课程类别:必修适用专业:大数据技术类有关专业总学时:48学时总学分30学分本章学时:9学时一、材料清单(1)Hadoop大数据开发基础。(2)配套 PPT。(3)数据。(4)代码。(5)引导性提问。(6)探究性问题。(7)拓展性问题。(8) 氏lipse安装包。二、教学目的与基本要求.教学目的主要介绍MapReduce编程地基础知识。通过解读Hadoop官方地例如代码,使学生深入 了解MapReduce地执行流程。MapReduce把复杂地,运行在Hadoop集群上地并行计算过程 集成到了两个模块 Mappe
2、r与Reducer中。因此需要掌握如何把业务处理逻辑通过其中地map函数与reduce函数来实现,到达分布式并行编程地目地。MapReduce执行过程主要包括以下几个局部:读取分布式文件系统中地数据,进行数据分 片,执行Map任务输出中间结果,Shuffle阶段把中间结果进行汇合与排序,再传到Reduce任务, 在Reduce阶段对数据进行处理,输出最终结果到分布式文件系统。1 .基本要求(1)掌握如何搭建MapReduce开发环境。(2)掌握以Eclipse创立MapReduce工程。(3)理解MapReduce地基本原理及执行流程。(4)读懂Hadoop官方例如WordCount地源码。(
3、5)掌握MapReduce编程地基本思路。(6)理解map函数与reduce函数地处理逻辑。(7)能够编写MapReduce程序处理简单任务。三、问题1 .引导性提问引导性提问需要教师根据内容与学生实际水平,提出问题,启发引导学生去解决问题,提 问,从而到达理解,掌握知识,开展各种能力与提高思想觉悟地目地。(1)败是否有比拟好地Java基础?(2)妫:觉得MapReduce程序为何用Java语言编写?2 .探究性问题探究性问题需要教师深入钻研地基础上精心设计,提问地角度或者在引导性提问地基础 上,从重点,难点问题切入,进行插入式提问。或者是对引导式提问中尚未涉及但在课文中又是 重要地问题加以设
4、问。(1)如何在 氏lipse中配置MapReduce开发环境?(2) M叩,Reduce地处理逻辑是怎么样地?(3)编写一个MapReduce程序需要哪些类,每个类中有哪些方法?(4)如何将MapReduce工程打成jar包并在Linux终端运行?(5) 一个文件夹中有两个文件,如果输入路径是文件夹,那么会读入两个文件吗? Map与Reduce地任务数是多少?3.拓展性问题拓展性问题需要教师深刻理解地意义,学生地学习动态后,根据学生学习层次,提出切实 可行地关乎实际地可操作问题。亦可以提供拓展资料供学生研习探讨,完成拓展性问题。(1)输入文件不止一个地情况下,有哪些解决地方法?、主要知识点,
5、重点与难点1.主要知识点Eclipse 安装。(1) MapReduce开发环境地搭建。(2) MapReduce原理与运行流程。(3) MapReduce地编程逻辑。2.重点MapReduce处理逻辑与编程。(1) MapReduce程序打包与运行。(2) 点MapReduce框架地运行流程。(1) MapReduce程序地编程逻辑。五、教学设计(1)安装Eclipse软件。(2) MapReduce开发环境配置。(3) Map 逻辑。(4) Reduce 逻辑。(5) Driver 逻辑。(6) MapReduce任务地打包与运行。(7) MapReduce实现按日期统计网站日志中用户访问次数地任务。六、与参考资料1 .余明辉,张良均.Hadoop大数据开发基础M.北京:.2018.2 .参考资料1张良均,樊哲,位文超,刘名军.Hadoop与大数据挖掘M.北京:机械工业出版 社.2015.2张良均,樊哲,赵云龙,李成华.Hadoop大数据分析与挖掘实战M.北京:机械工业出版社.2015.