[老汤]Spark 2.x实时流计算Flume+Kafka+Spark Streaming(系列四)【共26课时】

老汤特级讲师讲师评分5.0 学员441676 课程68

51CTO微职位大数据教学总监；多年大数据技术架构师，10年软件技术设计开发经验，在爱奇艺、北京国双科技(大数据上市公司)、快钱支付、华为等大型企业设计和开发大数据相关项目，大型的项目包...

畅销套餐
精选套餐
人气套餐
尊享套餐
高薪套餐

[老汤]Spark 2.x之Scala内功修炼视频课程四-面向对象编程基础

7245人学习

￥99.00

[老汤]Spark 2.x之Scala内功修炼视频课程五-函数式编程基础

2354人学习

￥99.00

[老汤]Spark 2.x之Scala内功修炼视频课程六-模式匹配

[老汤]Spark 2.x 实战应用三系列之Spark-core RDD Api

38826人学习

￥159.00

[老汤]Spark 2.x 实战应用系列四之Spark-core正确提交spark应用

4780人学习

￥99.00

[老汤]Spark 2.x实战应用系列五之Schedulers On Driver

6695人学习

￥99.00

更多 16 门课程

[老汤]Spark 2.x之精讲Spark Streamig

[老汤]Spark 2.x大数据实时流计算之Spark Streaming容错与语义(系列三)

951人学习

￥99.00

[老汤]Spark 2.x大数据实时流计算之Spark Streaming性能与稳定(系列二)

1300人学习

￥99.00

[老汤]Spark 2.x大数据实时流计算之Spark Streaming编程模型(系列一)

[老汤]Spark 2.x 之精讲Spark Core

大数据高级工程师：Spark 2.x 实战应用系列之正确理解Spark

19156人学习

￥85.00

[老汤]Spark 2.x 实战应用三系列之Spark-core RDD Api

38826人学习

￥159.00

[老汤]Spark 2.x 实战应用系列四之Spark-core正确提交spark应用

4780人学习

￥99.00

更多 4 门课程

课程介绍
课程大纲试看
讲师好课 67
学员评价

适合人群：

具有Spark Streaming编程模型基础的同学

课程目标：

熟悉Flume、Kafka等技术。并且利用Flume+Kafka+Spark Streaming来实现真实的项目案例

课程简介：

分别对Flume和Kafka进行了讲解，并且对Flume、Kafka以及Spark Streaming之间的兼容做了详细的讲解。最后利用Flume+Kafka+Spark Streaming来实现一个真实的实时流处理的案例

更多的课程可以在51CTO学堂中搜索"老汤"

-------------------------------------------------------------------------------------------

Scala内功修炼系列课程计划(scala专题： https://edu.51cto.com/topic/1384.html )

一、Scala内功修炼一：认识Scala (公开课，https://edu.51cto.com/course/12204.html )

二、Scala内功修炼二：怎样学习Scala (公开课，https://edu.51cto.com/course/12202.html )

三、Scala内功修炼三：十二步体验Scala (公开课， https://edu.51cto.com/course/11756.html )

四、Scala内功修炼四：面向对象编程基础 (https://edu.51cto.com/course/11770.html )

五、Scala内功修炼五：函数式编程基础 (https://edu.51cto.com/course/11802.html )

六、Scala内功修炼六：隐式转换(https://edu.51cto.com/course/11814.html )

七、Scala内功修炼七：类型系统 (https://edu.51cto.com/course/11849.html )

八、Scala内功修炼八：模式匹配 (https://edu.51cto.com/course/11904.html )

九、Scala内功修炼九：集合框架 (https://edu.51cto.com/course/12136.html )

Spark2.x 应用实战系列课程计划

------------------------------------Spark 2.x 入门指南-----------------------------------

Spark2.x 实战应用系列环境篇：Spark相关集群环境的搭建 (公开课，https://edu.51cto.com/course/11430.html )

Spark2.x 实战应用系列环境篇：Spark开发环境的搭建 (公开课，https://edu.51cto.com/course/11421.html )

Spark2.x 实战应用系列一：怎样学习Spark (公开课，https://edu.51cto.com/course/11210.html )

-------------------------------------Spark-core实战应用(专题: https://edu.51cto.com/topic/1275.html )------------------------------

Spark2.x 实战应用系列二：正确理解Spark (https://edu.51cto.com/course/10932.html )

Spark2.x 实战应用系列三：Spark-core RDD API (https://edu.51cto.com/course/11058.html )

Spark2.x 实战应用系列四：Spark-core 正确提交Spark应用 (https://edu.51cto.com/course/11132.html )

Spark2.x 实战应用系列五：Spark-core Schedulers On Driver (https://edu.51cto.com/course/11206.html )

--------------------------------------Spark-SQL实战应用(专题：https://edu.51cto.com/topic/1319.html )------------------------------

Spark2.x 实战应用系列六：Spark-SQL的前生今世以及未来 (https://edu.51cto.com/course/11277.html )

Spark2.x 实战应用系列七：有SQL基础就可玩转Spark SQL(Scala版&Java版) (https://edu.51cto.com/course/11496.html )

Spark2.x 实战应用系列七：有SQL基础就可玩转Spark SQL(Scala版&Python版) (https://edu.51cto.com/course/11495.html )

Spark2.x 实战应用系列八：Spark SQL with Hive (https://edu.51cto.com/course/11537.html )

---------------------------------------Spark-graphx(图计算)实战应用------------------------------------------------------------

Spark2.x 实战应用系列九：Spark Graphx实战(即将发布)

---------------------------------------Spark-ml(机器学习)实战应用------------------------------------------------------------

Spark2.x 实战应用系列十：Spark 机器学习实战(即将发布)

大数据实时流处理技术系列课程计划

---------------------------------------Spark Streaming专题(https://edu.51cto.com/topic/1402.html )--------------

Spark2.x 实时流计算系列一：Spark Streaming编程模型 (https://edu.51cto.com/course/12327.html )

Spark2.x 实时流计算系列二：Spark Streaming性能与稳定 (https://edu.51cto.com/course/12326.html )

Spark2.x 实时流计算系列三：Spark Streaming容错与语义 (https://edu.51cto.com/course/12325.html )

Spark2.x 实时流计算系列四：Flume + Kafka + Spark Streaming (https://edu.51cto.com/course/12324.html )

---------------------------------------Structured Streaming专题------------------------------------------------------------

Spark2.x 实时流计算系列五：Structured Streaming解决的问题 (https://edu.51cto.com/course/12330.html )

展开更多

课程大纲-[老汤]Spark 2.x实时流计算Flume+Kafka+Spark Streaming(系列四)

第1章课程内容 (13分钟 3节)
1-1

本课程内容本课程内容

[06:22] 开始学习
1-2

本课程需要的环境本课程需要的环境

[02:53] 开始学习
1-3

本地运行Spark Streaming程序本地运行Spark Streaming程序

[04:25] 开始学习
第2章讲解Flume (41分钟 4节)
2-1

Flume使用demo1 Flume使用demo1

「仅限付费用户」点击下载“kafka-basic-源代码.zip”
[10:18] 开始学习
2-2

Flume使用demo2 Flume使用demo2

「仅限付费用户」点击下载“spark-streaming-datasource-源代码.zip”
[13:52] 开始学习
2-3

Flume使用demo3 Flume使用demo3

「仅限付费用户」点击下载“flume + kafka + spark streaming.pptx”
[08:10] 开始学习
2-4

Flume的基本架构和基本术语 Flume的基本架构和基本术语
[08:54] 开始学习
第3章 Spark Streaming 集成 Flume (19分钟 3节)
3-1

Push模式 Spark Streaming集成Flume(push模式)
[10:07] 开始学习
3-2

Pull模式 Spark Streaming集成Flume(pull模式)
[08:22] 开始学习
3-3

Java版本的Spark Streaming集成Fl Java版本的Spark streaming集成Flume
[01:28] 开始学习
第4章讲解 Kafka (51分钟 5节)
4-1

Kafka总结介绍和安装 Kafka总结介绍和安装
[13:13] 开始学习
4-2

Kafka基本术语 - topic Kafka基本术语 - topic
[08:29] 开始学习
4-3

Producer原理 Producer原理
[08:02] 开始学习
4-4

Kafka基本术语 – Consumer Group Kafka基本术语 – Consumer Group
[08:36] 开始学习
4-5

Java 开发 Producer 和 Consume Java 开发 Producer 和 Consumer
[13:25] 开始学习
第5章 Spark Streaming 集成 Kafka (31分钟 4节)
5-1

Receiver模式 Receiver模式
[11:23] 开始学习
5-2

Direct模式 Direct模式
[07:53] 开始学习
5-3

Receiver模式对比Direct模式 Receiver模式对比Direct模式
[09:39] 开始学习
5-4

Java版本的Spark streaming集成Ka Java版本的Spark streaming集成Kafka
[02:24] 开始学习
第6章 Flume+Kafka+Spark Streaming (54分钟 7节)
6-1

Kafka作为Flume的Source Kafka作为Flume的Source
[06:12] 开始学习

展开更多

条学员评分超过 “大数据系统” 99%的课程

展开更多

加载中

没有了哦~

云原生 /K8s /云计算 /OpenHarmony

安全 /渗透测试 /网络技术 /物联网

Python /Java / C/C++ /Go语言

大前端开发 /Vue /React /Angular

大数据 /人工智能 /算法 /深度学习

Linux /自动化运维 /Oracle /测试

2022软考 /PMP /华为认证 /红帽

Excel /数据分析 /产品运营

[老汤]Spark 2.x实时流计算Flume+Kafka+Spark Streaming(系列四)

熟悉Flume、Kafka等技术。并且利用Flume+Kafka+Spark Streaming来实现真实的项目案例

迎新春满300减35 满400减50