一键部署Spark集群
适合人群
云计算(Docker+K8s)、大数据系统的运维和研发人员
你将会学到
基于Docker技术实现HDFS、YARN和Spark集群的一键部署
课程简介
本课程面向云计算(Docker+K8s)和大数据(Hadoop+Spark)方向的开发者和运维人员,它基于Docker技术,实现了Hadoop集群(HDFS+YARN)以及Spark集群的一键部署,基于本课程的技术,学习者可以在一个虚拟机上,使用一个命令,就可以构建指定数量的HDFS、YARN和Spark集群,这对于学习者而言,是虚拟机+Linux+Shell+Docker+Hadoop+Spark知识的综合应用,同时又可以作为一个高水平的项目,用于面试找工作的实际展示。
本课程所采用的软件及版本:CentOS 8.2 + Docker 19.03 + Hadoop 3.2.1 + Spark 3.0.1
本课程不提供下载资料。
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
- 第一章 课程简介
- 1-1试看 课程简介07:49
- 第二章 Hadoop+Spark 系统部署和集群规划
- 2-1系统部署和集群规划06:29
- 第三章 定制VMware虚拟机
- 3-1定制VMware虚拟机08:35
- 第四章 在虚拟机上安装CentOS 8
- 4-1最小化安装CentOS 805:38
- 4-2CentOS 8 IP 配置10:37
- 4-3CentOS 8 安装源配置11:44
- 4-4CentOS 8 无密码登录08:06
- 第五章 Docker安装与配置
- 5-1安装Docker11:23
- 5-2查看Docker镜像Tag & pull镜像 & 运行容器08:01
- 5-3解决Docker 网络连接问题16:31

艾叔:迈向Spark编程高手之路
1204人学习
艾叔
5.0
¥10.80

【企业级】一键部署基于Docker的Hadoop+Spark集群
1098人学习
艾叔
5.0
¥168.00
![[企业级]零基础IDEA入门Spark大数据开发](https://s2.51cto.com/images/202101/21/df567e42604322ecf9b23d7f1ec65650.jpg?x-oss-process=image)
[企业级]零基础IDEA入门Spark大数据开发
816人学习
艾叔
5.0
¥198.00

IDEA 统一开发Hadoop(MapReduce)+Spark程序
392人学习
艾叔
5.0
¥29.90

Linux小白如何学Hadoop大数据系统运维
216人学习
艾叔
5.0
会员免费

Spark大数据编程教学要点解析---面向应用型本科院校
78人学习
艾叔
5.0
¥29.90

大数据入门与核心技术项目实战视频课程(0基础学习)
216456人学习
柠檬
4.7
免费

Hadoop大数据基础与提升
178376人学习
任亮
4.9
¥599.00