Spark2.0之作业的提交及调度_上
{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }}
{{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }}
{{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}
分享
适合人群
学生 大数据从业人员 Spark开发人员 大数据开发人员
你将会学到
带领大家多面了解Spark的内核,从整体把握Spark系统的构架方式及设计思想
课程简介
本课程多面讲解Spark内核的各大组件及调度方式。Spark基于弹性分布式数据集构建的具有容错、位置感知、自动平很负载、水平扩展的分布式内存计算引擎,其核心思想是RDD。本课程会讲解Spark集群环境的安装、RDD抽象的概念、RDD上常见的transformation操作、action操作、作业的调度、调度模块、存储模块、执行模块、Shuffle模块、内存管理模块、RPC通信模块、Zookeeper构建HA等Spark核心的内容进行详细的结合源码的讲解。带大家走进Spark的源码世界!
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
{{ detail.username }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
105课时
Spark大数据处理及机器学习【基于Python的Spark 2.3**版】
72863人学习
张敏
5.0
¥399.00
10课时
【大数据 Hadoop生态 Spark 2.x 多案例】Spark 2.x基础与提升
8187人学习
张敏
4.5
¥99.00
24课时
【大数据 Spark 2.x 流数据 多案例】Spark Streaming流数据处理基础与提升
7152人学习
张敏
5.0
¥99.00
1课时
Spark技术免费公开课视频课程[张敏老师]
5496人学习
张敏
5.0
免费
55课时
【Python版pyspark】Spark大数据基础入门视频课程
3626人学习
张敏
1.0
¥199.00
1课时
Spark的技术应用分享【企业内部分享】
2815人学习
张敏
5.0
免费
19课时
【大数据 Hadoop生态 Spark 2.x 多案例】Spark SQL基础与提升
2573人学习
张敏
4.5
¥99.00
7课时
【大数据 hadoop生态 Spark2.x】深入Spark2.x内核大数据
1971人学习
张敏
4.3
¥49.00