赵渝强老师:大数据处理引擎Spark视频课程(直播课录制版)

Spark课程,让学员从基础的Scala编程语言开始学习,从而进一步学习Spark生态圈组件。

2016人学习

高级103课时2019/09/19更新

二维码下载学堂APP缓存视频离线看

赵渝强
    • 畅销套餐
    • 精选套餐
    • 人气套餐
    • 尊享套餐
    • 高薪套餐
赵强-大数据课程之从Hadoop到Spark专题
赵渝强老师:Hadoop 2.x(一) 大数据基础实战视频课程
67149人学习
¥279.00
赵渝强老师:Spark系列视频课程之一:Scala编程语言视频课程
19759人学习
¥179.00
赵渝强老师:Spark 2系列视频课程之二:Spark Core
14650人学习
¥279.00
更 多 11 门 课 程
赵强-Hadoop大数据高级应用课程套餐
赵渝强老师:Hadoop 2.x(一) 大数据基础实战视频课程
67149人学习
¥279.00
赵渝强老师:Hadoop 2.x (二) 大数据进阶实战视频课程
23783人学习
¥199.00
赵渝强老师:Hadoop 2.x (三) 数据分析引擎:Hive视频课程
28686人学习
¥249.00
更 多 7 门 课 程
赵强老师:大数据视频课程(新版)
赵渝强老师:大数据系列课程(新版)(2)背景知识与起源
6286人学习
¥59.00
赵渝强老师:大数据系列课程(新版)(4)Hadoop的体系结构
4343人学习
¥69.00
赵渝强老师:大数据系列视频课程(新版)(12)集群HA
1958人学习
¥109.00
更 多 23 门 课 程
赵强-大数据之Spark 2 课程视频专题
赵渝强老师:Spark系列视频课程之一:Scala编程语言视频课程
19759人学习
¥179.00
赵渝强老师:Spark 2系列视频课程之二:Spark Core
14650人学习
¥279.00
赵渝强老师:Spark 2 系列视频课程之三:Spark SQL
5208人学习
¥129.00
更 多 4 门 课 程
赵强-大数据之Spark 2 课程视频专题
赵渝强老师:Spark系列视频课程之一:Scala编程语言视频课程
19759人学习
¥179.00
赵渝强老师:Spark 2系列视频课程之二:Spark Core
14650人学习
¥279.00
赵渝强老师:Spark 2 系列视频课程之三:Spark SQL
5208人学习
¥129.00
更 多 4 门 课 程
  • 课程介绍
  • 课程大纲

适合人群:

对大数据有基本的了解,已掌握了Hadoop的学员;并想进一步学习Spark的学员。

你将会学到:

Spark课程,让学员从基础的Scala编程语言开始学习,从而进一步学习Spark生态圈组件。

课程简介:

Spark课程,让学员从最基础的Scala编程语言开始学习,从而进一步学习Spark Core、Spark SQL、Spark Streaming的内容。



赵渝强老师:大数据系列视频课程

=========================

1、Hadoop大数据迅速学习高级应用系列套餐

      https://edu.51cto.com/topic/1155.html    


2、Spark 2系列课程视频套餐

     https://edu.51cto.com/topic/1258.html 


3、大数据消息(Kafka)与实时处理(Storm)系统系列套餐

     https://edu.51cto.com/topic/1003.html 


4、NoSQL 数据库实战系列视频课程专题(上)

     https://edu.51cto.com/topic/955.html 


5、NoSQL 数据库实战系列视频课程专题(下)

      即将发布


====大数据处理引擎Spark课程大纲====

第一章:课程概述与Linux基础
(01)Spark从基础开始
(02)安装Linux的实验环境
(03)Linux的配置与课程概述
(04)使用vi编辑器
(05)Linux的常用命令和JDK的安装
(06)案例:分析Java的死锁


第二章:Scala编程基础
(07)Scala简介和配置
(08)Scala中数据的类型
(09)变量、函数、条件判断
(10)Scala中的循环
(11)函数的参数
(12)懒值和异常处理
(13)数组
(14)元组和映射


第三章:Scala的面向对象编程
(15)Scala面向对象语言概述
(16)面向对象的概念和类的定义
(17)属性的get和set方法
(18)内部类
(19)类的构造器
(20)Object对象
(21)类的apply方法
(22)继承
(23)trait
(24)包和包对象


第四章:Scala的函数式编程

(25)Scala语言的函数式编程概述
(26)Scala的函数和匿名函数
(27)带函数参数的函数
(28)闭包
(29)柯里化
(30)高阶函数示例


第五章:Scala的集合

(31)可变集合和不可变集合
(32)可变列表和不可变列表
(33)序列
(34)集Set
(35)模式匹配
(36)样本类


第六章:Scala的高级特性

(37)泛型类
(38)泛型函数
(39)上界和下界
(40)视图界定
(41)协变和逆变
(42)隐式转换函数
(43)隐式参数和隐式类


第七章:Spark的体系结构与安装配置

(44)Spark Core课程概述
(45)什么是Spark和特点
(46)Spark的体系结构
(47)安装和部署Spark环境
(48)基于文件目录的单点故障恢复
(49)基于ZooKeeper的Spark HA的实现
(50)利用ZooKeeper实现分布式锁


第八章:执行Spark任务

(51)使用spark-submit提交spark任务
(52)使用spark-shell交互式命令行工具
(53)开发Scala版本的WordCount程序
(54)开发Java版本的WordCount程序
(55)分析WordCount程序的执行过程
(56)Spark提交任务的流程


第九章:RDD和RDD的算子

(57)什么是RDD
(58)RDD的算子
(59)RDD基本算子示例
(60)RDD的缓存机制
(61)RDD的容错机制
(62)RDD的依赖关系和Spark任务中的Stage
(63)高级算子:mapPartitionsWithIndex
(64)高级算子:aggregate
(65)高级算子:aggregate(1)
(66)高级算子:aggregate(2)
(67)高级算子:aggregateByKey
(68)高级算子:coalesce和repartition


第十章:Spark RDD编程案例

(69)案例一:求网站访问量
(70)案例二:自定义分区28:55
(71)案例三:访问关系型数据库29:58
(72)案例四:使用JdbcRDD


第十一章:Spark SQL基础

(73)Spark SQL课程概述
(74)什么是Spark SQL?
(75)通过case class创建DataFrame
(76)通过SparkSession创建DataFrame
(77)通过带格式的文件创建DataFrame
(78)操作DataFrame
(79)临时视图
(80)DataSet简介


第十二章:Spark SQL的数据源

(81)load和save函数
(82)什么是Parquet文件
(83)Parquet文件Schema的合并
(84)读取JSON文件
(85)使用JDBC数据源
(86)访问HiveTable
(87)指定schema的格式
(88)使用caseclass
(89)保存到关系型数据库中
(90)SparkSQL性能的优化


第十三章:Spark Streaming基础

(91)SparkStreaming课程概述
(92)什么是SparkStreaming和结构
(93)演示Demo:NetworkWordCount
(94)开发自己的NetworkWordCount程序


第十四章:Spark Streaming进阶

(95)StreamingContext和DStream简介
(96)DStream中的转换操作
(97)窗口操作
(98)DStream的输入和输出
(99)集成Spark SQL


第十五章:使用外部数据源

(100)集成Spark Streaming和Flume(1)
(101)集成Spark Streaming和Flume(2)
(102)Kafka消息系统简介和体系结构
(103)搭建Kafka环境
(104)集成Spark Streaming和Kafka


展开更多

课程大纲-赵渝强老师:大数据处理引擎Spark视频课程(直播课录制版)

展开更多
在线
客服
APP
下载

下载Android客户端

下载iphone 客户端

官方
微信

关注官方微信

返回
顶部