Hadoop平台HDFS存储原理、MapReduce与Yarn工作机制视频课程【共9课时】

高俊峰金牌讲师讲师评分4.9 学员928367 课程101

粉丝群

Linux资深技术专家，畅销书籍《循序渐进Linux》、《高性能Linux服务器构建实战》作者，曾就职于新浪、万网，目前服务于上海好耶集团，具有多年的自动化运维和管理经验，擅长Linux、集群应用、M...

课程介绍
课程大纲试看
讲师好课 100
套餐推荐
学员评价

适合人群：

hadoop运维人员，大数据开发人员。

课程目标：

本课程主要介绍大数据平台hadoop下分布式文件系统HDFS存储原理与实现过程、分布式计算MapReduce与yarn工作机制，通过本课程的学习，学员对hadoop运行机制有更深入的了解。

课程简介：

一、分布式文件系统HDFS存储原理

1、HDFS写入数据过程分析

2、HDFS读取文件过程分析

3、HDFS容错机制：故障类型及监测方法

4、HDFS容错机制：读写容错方法

5、HDFS容错机制：数据节点（DN）失效策略

6、HDFS备份容错规则

二、分布式计算MapReduce与yarn工作机制

1、第一代hadoop组成与结构（MapReduce角色分配、MapReduce执行流程）

2、第二代hadoop组成与结构

3、yarn运行架构

4、YARN中提交应用程序流程

展开更多

课程大纲-Hadoop平台HDFS存储原理、MapReduce与Yarn工作机制视频课程

第1章分布式文件系统HDFS存储原理 (1小时23分钟 5节)
1-1

HDFS写入数据过程分析发送数据写请求、文件切分、DN分配、数据写入、完成写入

「仅限付费用户」点击下载“分布式文件系统HDFS存储原理漫画解读.docx”
[16:08] 开始学习
1-2

HDFS读取文件过程分析用户发起读请求、联系元数据节点、下载数据、完成读数据
[14:38] 开始学习
1-3

HDFS容错机制：故障类型及监测方法常见三类故障、故障检测机制、心跳信息与数据块报告
[13:34] 开始学习
1-4

HDFS容错机制：读写容错、数据节点（DN）失效策略读容错、写容错方法，数据节点（DN）失效策略，机架与数据存储副本规则
[24:17] 开始学习
1-5

hadoop大数据平台硬件和网络选型经验 hadoop网络架构经验和硬件选项技巧
[15:16] 开始学习
第2章分布式计算MapReduce与yarn工作机制 (1小时18分钟 4节)
2-1

第一代hadoop中MapReduce角色分配过程 MapReduce运行原理和执行逻辑过程

「仅限付费用户」点击下载“分布式计算MapReduce与yarn工作机制.docx”
[20:01] 开始学习
2-2

第一代hadoop中MapReduce执行流程 MapReduce提交作业、初始化作业、任务分配、任务执行、任务完成的过程
[20:06] 开始学习
2-3

第二代hadoop中yarn运行架构 ResourceManager、ApplicationMaster、NodeManager之间关系以及执行流程
[19:37] 开始学习
2-4

第二代hadoop中YARN中提交应用程序流程 ResourceManager、ApplicationMaster、NodeManagers和容器如何相互交互
[19:01] 开始学习

条学员评分超过 “大数据系统” 99%的课程

展开更多

加载中

没有了哦~

16周年庆满减满200减20元 满400减40元

16周年庆满减满200减20元满400减40元