[老汤]Spark 2.x内核原理四之shuffle管理(Shuffle Manager)视频课程

深入了解Spark Shuffle的原理

1527人学习

高级9课时2019/05/22更新

二维码下载学堂APP缓存视频离线看

老汤
  • 课程介绍
  • 课程大纲

适合人群:

有Spark基础,且想了解Spark Shuffle的同学

你将会学到:

深入了解Spark Shuffle的原理

课程简介:

深入了解Spark Shuffle的原理,分别对Spark Shuffle过程和Spark Shuffle过程做了比较深入的讲解 

课程内容如下: 

1、课程内容 

2、MapOutputTracker 

3、HashShuffleWriter 

4、SortShuffleWriter 

5、UnsafeShuffleWriter 

6、BypassMergeSortShuffleWriter 

7、ShuffleReader 

8、ShuffleManager+MemoryManager+StorageManager

展开更多

课程大纲- [老汤]Spark 2.x内核原理四之shuffle管理(Shuffle Manager)视频课程

在线
客服
APP
下载

下载Android客户端

下载iphone 客户端

官方
微信

关注官方微信

返回
顶部