通过ambari自动化部署spark服务以及相关配置
- 快速掌握Ambari自动化运维
- Ambari构建hadoop
Apache Ambari是一种基于Web的运维工具,支持Apache Hadoop集群的自动化部署、管理和监控。Ambari目前已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。
Ambari使用Ganglia收集度量指标,用Nagios支持系统报警,当需要引起管理员的关注时(比如,节点停机或磁盘剩余空间不足等问题),系统将向其发送邮件。
本课程主要讲解Ambari工具的使用,主要涉及Ambari的安装部署、在Ambari下自动化部署一套hadoop3.x集群、在Ambari下扩容hadoop集群节点、在Ambari下添加Hive、hbase、spark等服务,以及如何实现hadoop集群中服务的自动化管理,还介绍了Ambari下如何进行故障告警和故障通知功能。
本课程采用Centos7.x版本,Ambari版本为Ambari2.7.x,hadoop版本为HDP3.1(hadoop3.x)。
1、Ambari的工作原理与架构
2、安装与部署Ambari
3、通过Ambari部署一个Hadoop3.x集群
4、通过Ambari扩容hadoop集群节点
5、通过Ambari在hadoop集群中新增hive/hbase/tez服务组件
6、通过Ambari在hadoop中新增spark计算引擎
7、通过Ambari管理hadoop集群中的各种组件和服务
8、通过Ambari修改hadoop集群各个组件配置参数
9、在Ambari平台配置监控告警、并设置通知策略
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
课程大纲
- 1试看 ambari的架构以及工作原理20:41
- 2ambari安装部署准备以及本地yum仓库的构建19:08
- 3ambari的安装部署过程以及问题解决13:24
- 4通过ambari自动化部署一套hadoop3.x集群(1)15:55
- 5通过ambari自动化部署一套hadoop3.x集群(2)15:43
- 6通过ambari自动化部署一套hadoop3.x集群(3)05:05
- 7通过ambari自动化扩容主机到hadoop集群21:19
- 8通过ambari自动化部署hive、tez、hbase服务15:23
- 9ambari下hadoop服务的管理方式26:02
- 10通过ambari自动化部署spark服务以及相关配置13:52