02.yarn模式下job执行过程
{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }}
{{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }}
{{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}
分享
适合人群
对大数据有所了解,有一定编程基础
你将会学到
通过图解和手敲代码、剖析原理的方式,让学员学习Spark+案例+推荐系统技术。
课程简介
本课程授课老师
徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。
Spark 是一种与 Hadoop 相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越,换句话说,Spark 启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。
Spark 是使用 Scala 实现的基于内存计算的大数据开源集群计算环境.提供了Java、Scala、Python、R 等语言的调用接口。
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
{{ detail.username }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
- 第一章 Spark第1天Spark基础
- 1-1试看 01.Spark的安装14:46
- 1-2试看 02.Spark体验wordcount实现26:32
- 1-3试看 03.spark独立集群模式搭建01:04:16
- 1-404.sparkjob部署22:02
- 1-505.spark 两次shuffle18:24
- 1-606.spark RDD-PairRDD-shuffle-宽01:16:46
- 第二章 Spark第2天Spark 作业提交
- 2-101.taggen scala版spark实现50:44
- 2-202.taggen java版spark实现40:57
- 2-303.spark作业提交流程56:06
- 2-404.spark作业提交流程-201:06:57
58课时
大数据分析电视收视率项目实战教程(Hadoop、Hive升级Spark技术)
10368人学习
猿课教育
5.0
¥318.00
133课时
Spark实战视频课程(Spark基础知识+企业案例)
9544人学习
猿课教育
4.8
¥199.00
34课时
Hadoop(一)入门与环境配置视频课程
3586人学习
猿课教育
1.0
¥34.00
5课时
Hadoop安装与搭建
3239人学习
猿课教育
5.0
会员免费
25课时
6期大数据之日志系统Flume技术教程(讲理论还讲实操)
3131人学习
猿课教育
5.0
¥98.00
49课时
Spark基础与提升第一季-核心编程视频课程
3086人学习
猿课教育
暂无评分
¥99.00
35课时
爱奇艺实时流处理项目实战 (Spark Streaming)
2487人学习
猿课教育
4.5
¥238.00
14课时
Spark企业案例运用日志分析通过H5跨平台展示【综合业务】
1385人学习
猿课教育
5.0
¥19.00