下载学堂APP缓存视频离线看
- 畅销套餐
- 精选套餐
- 人气套餐
- 尊享套餐
- 高薪套餐
- 课程介绍
- 课程大纲
适合人群：
所有Spark学习者和从业人员、有分布式计算框架应用经验的人员、高等院校学生
你将会学到：
循序渐进地解析Spark 3.0.0 Driver启动内幕的内核源码。
- Spark 3.0.0 Driver Program剖析
- Spark 3.0.0 DAGScheduler解析
- Spark 3.0.0 TaskScheduler解析
- Spark 3.0.0 SchedulerBackend解析
- 打通Spark 3.0.0系统运行内幕机制循环流程
课程简介：
本课程讲解Spark 3.0.0 Driver 启动内幕 的内容，包括：Spark Driver Program 剖析:Spark Driver Program、SparkContext 深度剖析、SparkContext 源码解析；DAGScheduler 解析：DAG 的实例化 、DAGScheduler 划分Stage 的原理、DAGScheduler 划分Stage 的具体算法、Stage 内部Task 获取位置的算法；TaskScheduler 解析：TaskScheduler 原理剖析、TaskScheduler 源码解析；SchedulerBackend 解析：SchedulerBackend 原理剖析、SchedulerBackend 源码解析、Spark 程序的注册机制、Spark 程序对计算资源Executor 的管理； 打通Spark 系统运行内幕机制循环流程。
课程大纲-Spark 3.0.0 Driver 启动内幕
第1章Spark 3.0.0 Driver Program剖析(41分钟2节)
1-1
Spark3.0.0 Driver Program 剖析上集Spark3.0.0 Driver Program 剖析-上集
「仅限付费用户」点击下载“Spark3.0.0 Driver Program 剖析.pptx”
[13:54]开始学习1-2
Spark3.0.0 Driver Program 剖析下集Spark3.0.0 Driver Program 剖析-下集
「仅限付费用户」点击下载“Spark3.0.0 Driver Program 剖析.pptx”
[27:17]开始学习第2章Spark 3.0.0 DAGScheduler解析(1小时16分钟4节)
2-1
Spark3.0.0 DAGScheduler解析-实例化Spark3.0.0 DAGScheduler解析之定义 实例化及原理
「仅限付费用户」点击下载“Spark3.0.0 DAGScheduler 解析.pptx”
[14:29]开始学习2-2
Spark3.0.0DAGScheduler划分Stage上Spark3.0.0 DAGScheduler 划分Stage 上集
「仅限付费用户」点击下载“Spark3.0.0 DAGScheduler 解析.pptx”
[24:48]开始学习2-3
Spark3.0.0DAGScheduler划分Stage下Spark3.0.0 DAGScheduler 划分Stage 下集
「仅限付费用户」点击下载“Spark3.0.0 DAGScheduler 解析.pptx”
[24:15]开始学习2-4
Spark3.0.0 Stage 内部Task 获取位置Spark3.0.0 Stage 内部Task 获取位置的算法
「仅限付费用户」点击下载“Spark3.0.0 Stage 内部Task 获取位置的算法.pptx”
[12:30]开始学习第3章Spark 3.0.0 TaskScheduler解析(1小时3节)
3-1
Spark3.0.0 TaskScheduler 原理剖析Spark3.0.0 TaskScheduler 原理剖析
「仅限付费用户」点击下载“Spark3.0.0 TaskScheduler 原理剖析.pptx”
[12:50]开始学习3-2
Spark3.0.0 TaskScheduler源码解析上Spark3.0.0 TaskScheduler 源码解析-上集
「仅限付费用户」点击下载“Spark3.0.0 TaskScheduler 源码解析.pptx”
[20:09]开始学习3-3
Spark3.0.0 TaskScheduler 源码解析下Spark3.0.0 TaskScheduler 源码解析-下集
「仅限付费用户」点击下载“Spark3.0.0 TaskScheduler 源码解析.pptx”
[27:17]开始学习第4章Spark 3.0.0 SchedulerBackend解析(13分钟1节)
4-1
Spark3.0.0 SchedulerBackendSpark3.0.0 SchedulerBackend 解析
「仅限付费用户」点击下载“Spark3.0.0 SchedulerBackend 解析.pptx”
[13:07]开始学习第5章打通Spark 3.0.0系统运行内幕机制循环流程(27分钟1节)
5-1
Spark 3.0.0打通Spark 系统运行内幕机制循环Spark 3.0.0打通Spark 系统运行内幕机制循环流程
「仅限付费用户」点击下载“Spark3.0.0 打通Spark 系统运行内幕机制循环流程.pptx”
[27:31]开始学习
“段智华”老师的其他课程更多+
