求每个部门平均工资数据的流动分析
购买大数据Hadoop课程套餐,享八五折优惠!!
套餐地址:https://edu.51cto.com/topic/1155.html
赵渝强老师博客地址:http://collen7788.blog.51cto.com/
本门课程将通过6个具体的案例加强学员的MapReduce程序的分析和开发能力,并巩固之前的MapReduce基础知识。
本系列课程共包含以下五门课程:
1、Hadoop 2.x (一)大数据基础
https://edu.51cto.com/course/course_id-6704.html
2、Hadoop 2.x (二)大数据进阶
https://edu.51cto.com/course/course_id-6705.html
3、Hadoop 2.x (三) 数据分析引擎:Hive
https://edu.51cto.com/course/course_id-6706.html
4、Hadoop 2.x (四)数据分析引擎:Pig
https://edu.51cto.com/course/course_id-6707.html
5、Hadoop 2.x(五) MapReduce实战案例集锦
https://edu.51cto.com/course/course_id-8288.html
6、Hadoop 2.x(六) 使用Avro实现序列化
https://edu.51cto.com/course/course_id-8978.html
7、Hadoop 2.x (七):工作流引擎Oozie
https://edu.51cto.com/course/10353.html
建议学员从第一门课程开始,逐步学习;并完成相应的实验,这样可以更好的理解和学习Hadoop的体系结构。
《Hadoop 2.x(五) MapReduce实战案例集锦》课程大纲
第一章 课程概述
(*)课程概述
(*)准备实验数据
(*)MapReduce基础知识回顾
第二章 案例一:使用MRUnit进行单元测试
(*)使用MRUnit测试Mapper
(*)使用MRUnit测试Reducer
(*)使用MRUnit测试MapperReducer
第三章 案例二:数据去重
(*)一个列的数据去重
(*)多个列的数据去重
第四章 案例三:数据排序
(*)基本数据类型的排序
(*)一个列的排序
(*)多个列的排序
第五章 案例四:每个部门的平均工资
(*)数据的流动过程
(*)开发Mapper、Reduce程序
(*)测试
第六章 案例五:表的自连接
(*)自连接的数据的流动过程
(*)开发Mapper
(*)开发Reducer
(*)测试程序
第七章 案例六:多表查询
(*)多表查询的数据的流动过程
(*)开发Mapper
(*)开发Reducer
(*)测试程序
第八章 案例七:倒排索引
(*)倒排索引的数据的流动过程
(*)开发Mapper
(*)开发Combiner
(*)开发Reducer
(*)测试程序
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
课程大纲
- 第一章 课程概述
- 1-1试看 课程概述10:17
- 第二章 使用MRUnit进行单元测试
- 2-1使用MRUnit测试Mapper12:54
- 2-2使用MRUnit测试Reducer06:54
- 2-3使用MRUnit测试MapReduce09:26
- 第三章 数据去重
- 3-1一个列的数据去重18:19
- 3-2多个列的数据去重05:27
- 第四章 数据的排序
- 4-1数字的排序10:57
- 4-2字符串的排序06:10
- 4-3一个列和多个列的排序12:05
- 第五章 求每个部门的平均工资
- 5-1求每个部门平均工资数据的流动分析06:01