【实战】Spark2.0之内部子系统详细讲解
{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }}
{{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }}
{{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}
分享
适合人群
大数据爱好者 Spark爱好者 想学大数据的0基础的人
你将会学到
想学习Spark进入大数据领域的同学,花一个小时学习Spark大数据计算引擎在整个大数据生态圈的地位,并且跟跟着老师完成Spark学习环境的搭建,对常见的Spark运用场景进行实战操作。为学习Spark Sql、Spark Streaming、Spark图计算、Spark机器学习建立好环境基础!
课程简介
Spark2.0入门课程的目的是让大数据初学者入门,目标是让想学大数据的人了解这个大数据生态圈,以及Spark在大数据生态圈中的霸主地位。
该课程为Spark的基础课程。
1.会讲解到Spark学习环境的搭建
2.最基础的Linux命令的使用
3.Hadoop中分布式文件系统HDFS的使用
4.Spark中的基本概念及抽象
5.Spark程序编写的注意事项
6.Spark性能优化的方向
7.以及会讲解一些Spark内核和内核使用的Scala语言的知识。
8.最后以一个成都地区20160101到20161231一年PM2.5数据的监控数据作为实战项目的数据素材,以此讲解Spark2.0初阶的项目实战并以此作为基础课程的结束。
为深入学习SparkSql、Spark流处理、Spark图计算、Spark机器学习打下基础。
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
- 1试看 【实战】Spark2.0之大数据生态圈的10年22:12
- 2试看 【实战】Spark2.0环境搭建_上33:10
- 3【实战】Spark2.0集群安装_下36:46
- 4【实战】Spark2.0之快速入门25:14
- 5【实战】Spark2.0中的基本抽象及术语21:32
- 6【实战】Spark2.0RDD常见的创建方式28:21
- 7【实战】Spark2.0常见的transformation操作23:28
- 8【实战】Spark2.0之常见的action操作及触发作业提交的原理24:53
- 9【实战】Spark2.0之内部子系统详细讲解34:03
- 10【实战】Spark2.0实战之统计PM2.5浓度各级别天数52:41
![Spark大数据处理及机器学习【基于Python的Spark 2.3**版】](https://s2.51cto.com/images/202101/25/23624972951c2d5c598bfc635d47a0d4.jpg?x-oss-process=image)
Spark大数据处理及机器学习【基于Python的Spark 2.3**版】
72860人学习
张敏
5.0
¥399.00
![【大数据 Hadoop生态 Spark 2.x 多案例】Spark 2.x基础与提升](https://s2.51cto.com/images/202101/28/2787286af1fa64b69b672a5ca8d002d7.jpg?x-oss-process=image)
【大数据 Hadoop生态 Spark 2.x 多案例】Spark 2.x基础与提升
8187人学习
张敏
4.5
¥99.00
![【大数据 Spark 2.x 流数据 多案例】Spark Streaming流数据处理基础与提升](https://s2.51cto.com/images/201801/11/7f1236c10dc8a7df7590f39cd2e4fd24.jpg?x-oss-process=image)
【大数据 Spark 2.x 流数据 多案例】Spark Streaming流数据处理基础与提升
7152人学习
张敏
5.0
¥99.00
![Spark技术免费公开课视频课程[张敏老师]](https://s2.51cto.com/images/201704/b8cca7b14ee21ba601a961729eef8dbf984177.png?x-oss-process=image)
Spark技术免费公开课视频课程[张敏老师]
5496人学习
张敏
5.0
免费
![【Python版pyspark】Spark大数据基础入门视频课程](https://s2.51cto.com/images/202101/25/1719a30d8680c2b28a527498cfdfa9c6.jpg?x-oss-process=image)
【Python版pyspark】Spark大数据基础入门视频课程
3626人学习
张敏
1.0
¥199.00
![Spark的技术应用分享【企业内部分享】](https://s2.51cto.com/images/201805/17/216c1e1caac30a89dff54ebf032136e8.jpg?x-oss-process=image)
Spark的技术应用分享【企业内部分享】
2815人学习
张敏
5.0
免费
![【大数据 Hadoop生态 Spark 2.x 多案例】Spark SQL基础与提升](https://s2.51cto.com/images/202101/28/1bea2e6cb1a4031c22df26f694deddc1.jpg?x-oss-process=image)
【大数据 Hadoop生态 Spark 2.x 多案例】Spark SQL基础与提升
2573人学习
张敏
4.5
¥99.00
![【大数据 hadoop生态 Spark2.x】深入Spark2.x内核大数据](https://s2.51cto.com/images/201703/b55f6f1483e16870f1e267dbbe2d11585adac9.jpg?x-oss-process=image)
【大数据 hadoop生态 Spark2.x】深入Spark2.x内核大数据
1971人学习
张敏
4.3
¥49.00