Spark2.0环境搭建
{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }}
{{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }}
{{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}
分享
适合人群
学生 大数据从业人员 Spark开发人员 大数据开发人员
你将会学到
带领大家多面了解Spark的内核,从整体把握Spark系统的构架方式及设计思想
课程简介
本课程多面讲解Spark内核的各大组件及调度方式。Spark基于弹性分布式数据集构建的具有容错、位置感知、自动平很负载、水平扩展的分布式内存计算引擎,其核心思想是RDD。本课程会讲解Spark集群环境的安装、RDD抽象的概念、RDD上常见的transformation操作、action操作、作业的调度、调度模块、存储模块、执行模块、Shuffle模块、内存管理模块、RPC通信模块、Zookeeper构建HA等Spark核心的内容进行详细的结合源码的讲解。带大家走进Spark的源码世界!
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
![Spark大数据处理及机器学习【基于Python的Spark 2.3**版】](https://s2.51cto.com/images/202101/25/23624972951c2d5c598bfc635d47a0d4.jpg?x-oss-process=image)
Spark大数据处理及机器学习【基于Python的Spark 2.3**版】
72860人学习
张敏
5.0
¥399.00
![【大数据 Hadoop生态 Spark 2.x 多案例】Spark 2.x基础与提升](https://s2.51cto.com/images/202101/28/2787286af1fa64b69b672a5ca8d002d7.jpg?x-oss-process=image)
【大数据 Hadoop生态 Spark 2.x 多案例】Spark 2.x基础与提升
8187人学习
张敏
4.5
¥99.00
![【大数据 Spark 2.x 流数据 多案例】Spark Streaming流数据处理基础与提升](https://s2.51cto.com/images/201801/11/7f1236c10dc8a7df7590f39cd2e4fd24.jpg?x-oss-process=image)
【大数据 Spark 2.x 流数据 多案例】Spark Streaming流数据处理基础与提升
7152人学习
张敏
5.0
¥99.00
![Spark技术免费公开课视频课程[张敏老师]](https://s2.51cto.com/images/201704/b8cca7b14ee21ba601a961729eef8dbf984177.png?x-oss-process=image)
Spark技术免费公开课视频课程[张敏老师]
5496人学习
张敏
5.0
免费
![【Python版pyspark】Spark大数据基础入门视频课程](https://s2.51cto.com/images/202101/25/1719a30d8680c2b28a527498cfdfa9c6.jpg?x-oss-process=image)
【Python版pyspark】Spark大数据基础入门视频课程
3626人学习
张敏
1.0
¥199.00
![Spark的技术应用分享【企业内部分享】](https://s2.51cto.com/images/201805/17/216c1e1caac30a89dff54ebf032136e8.jpg?x-oss-process=image)
Spark的技术应用分享【企业内部分享】
2815人学习
张敏
5.0
免费
![【大数据 Hadoop生态 Spark 2.x 多案例】Spark SQL基础与提升](https://s2.51cto.com/images/202101/28/1bea2e6cb1a4031c22df26f694deddc1.jpg?x-oss-process=image)
【大数据 Hadoop生态 Spark 2.x 多案例】Spark SQL基础与提升
2573人学习
张敏
4.5
¥99.00
![【大数据 hadoop生态 Spark2.x】深入Spark2.x内核大数据](https://s2.51cto.com/images/201703/b55f6f1483e16870f1e267dbbe2d11585adac9.jpg?x-oss-process=image)
【大数据 hadoop生态 Spark2.x】深入Spark2.x内核大数据
1971人学习
张敏
4.3
¥49.00