从Scala到Spark 2.x专题

第一阶段：  Scala内功修炼

首先从面向对象编程和函数式编程两个方面入门Scala语言。然后熟练学习Scala的模式匹配、隐式系统以及类型系统三个Scala的高级特性。最后熟练学习Scala的数据结构(即集合框架)的原理以及特性。

第二阶段：  Spark Core(RDD)

分别从以下四步轻而易举的学习Spark 2.x的核心编程： 正确理解Spark 、RDD API 、正确提交Spark应用、Spark job核心原理

第三阶段：  Spark SQL

学习Spark SQL的前生今世及未来，从而达到思想上入门Spark SQL、详细并且多面的学习Spark SQL所有的应用点、Spark SQL兼容Hive

第四阶段：  Spark Streaming

首先站在使用的层面学习Spark Streaming的编程模型；然后深入到讲解Spark Steaming的性能与稳定、容错与语义；最后站在实践的层面上来讲解Spark Streaming在实时流处理

第五阶段：  Spark内核原理

分别从内核的级别讲解Spark 2.x的序列化机制、内存管理、存储管理以及shuflle管理

从Scala到Spark 2.x专题资料下载