Spark独立模式构建以及Spark on Yarn集成运维

通过本课程的学习,可以使学员系统、多面、快速的学习spark运维技能。达到即学即用的效果。

1184人学习

初级11课时2020/06/16更新

二维码下载学堂APP缓存视频离线看

高俊峰
    • 畅销套餐
    • 精选套餐
    • 人气套餐
    • 尊享套餐
    • 高薪套餐
Hadoop大数据运维入门与企业实战【完整版】
Ansible与Ansible-playbook应用实战视频课程
4689人学习
¥199.00
大数据运维hadoop零基础入门学习以及高可用集群的构建
3127人学习
¥188.00
Hadoop大数据平台自动化运维工具Ambari应用实战
3582人学习
¥199.00
更 多 9 门 课 程
GoldenGate+ETL/Kettle专题(92个项目)
GoldenGate数据库容灾迁移01(OGG同构异构、数据库迁移、数据同步、容灾复制)
162101人学习
¥998.00
GoldenGate数据库容灾迁移02(OGG同构异构、数据库迁移、数据同步、容灾复制)
42391人学习
¥889.00
GoldenGate数据库容灾迁移03(OGG同构异构、数据库迁移、数据同步、容灾复制)
22376人学习
¥889.00
更 多 7 门 课 程
大数据运维架构师实战培训专题2.0
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
78380人学习
¥499.00
大数据运维架构师培训(2):Hbase,Hive, Phoenix,Pig,Impala,Kudu
30778人学习
¥333.00
大数据运维架构师培训(3):Spark,Flink, Storm,Kafka,Solr
29859人学习
¥399.00
更 多 12 门 课 程
赵强-大数据课程之从Hadoop到Spark专题
赵渝强老师:Hadoop 2.x(一) 大数据基础实战视频课程
67213人学习
¥279.00
赵渝强老师:Spark系列视频课程之一:Scala编程语言视频课程
19759人学习
¥179.00
赵渝强老师:Spark 2系列视频课程之二:Spark Core
14650人学习
¥279.00
更 多 11 门 课 程
赵强-大数据课程之从Hadoop到Spark专题
赵渝强老师:Hadoop 2.x(一) 大数据基础实战视频课程
67213人学习
¥279.00
赵渝强老师:Spark系列视频课程之一:Scala编程语言视频课程
19759人学习
¥179.00
赵渝强老师:Spark 2系列视频课程之二:Spark Core
14650人学习
¥279.00
更 多 11 门 课 程
  • 课程介绍
  • 课程大纲

适合人群:

具备Linux基础,要熟悉Linux常用命令的使用。 本课程适合大数据运维工程师、大数据分析同学进行参考和学习。

你将会学到:

通过本课程的学习,可以使学员系统、多面、快速的学习spark运维技能。达到即学即用的效果。

  • 快速掌握spark独立模式的使用
  • 快速掌握spark on yarn模式的使用

课程简介:

本课程以spark-3.0.0版本为准,主要介绍spark独立模式、spark on yarn模式的构建和基础运维,课程大纲如下:


  

1、spark的整体架构以及Cluster Manager、Worker、Executor、Driver功能介绍

2、独立模式下spark集群的部署

3、SparkSQL与Hive整合

4、2、spark-shell的使用

5、Spark-Submit的使用

6、Spark本地或者单机运行模式分析

7、Spark客户端集群模式分析

8、Spark完全集群模式运行分析

9、在yarn中配置spark步骤

10、开启spark日志记录功能

11、yarn client模式提交到集群实现流程

12、yarn cluster模式提交到集群实现流程 

图片111.png


图片122.png

展开更多
在线
客服
APP
下载

下载Android客户端

下载iphone 客户端

官方
微信

关注官方微信

返回
顶部