中文版|Airflow 调度系统

课程介绍

本课程⾯向的是 SRE，DevOps，⼤数据 ⼯程师； 通过本课程的学习，你将会获得如下能⼒：

• 从0到1的熟练使⽤ Airflow ⼯具和⽣态，并能充分利⽤这⼀调度利器，在⼯作中发挥重要作⽤

• airflow 基本使⽤，故障告警，排查，性能调优

• 如何基于 airflow 的 API 对其进⾏⼆次开发

1. 架构和组件介绍

架构

组件

2. 使⽤场景

1. ⼤数据⾃动化任务流

2. DevOps

3. 快速开发环境部署

• 云主机

• Docker

4.名词介绍和⽤途

5.快速⼊⻔

• 最⼩ Dag 示例

• 介绍 Dag, BashOperator

• 任务间依赖关系

6. 深⼊定时策略

1. 时区

2. linux cron和 schedule_interval

3. schedule_interval 表达式 案例演示

7. 全⾯学习 UI 使⽤

1. View

2. Admin

3. Doc

4. 表结构介绍

8. ⽇志和监控
架构

基于 Prometheus 监控⽅案

错误跟踪

9. 安全

1.RBAC 权限
2.组件权限控制
2.1.API
2.2.Webserver
2.3.Flower

10. 专题学习
1. 2.x新特性
2. 深⼊command line

3.深⼊ operators

4.深⼊ Executor

11. 通知
1.邮件
2.短信
3.钉钉

12. ⽣产环境 HA 部署
1.云主机
2.Kubernetes

13. 插件
1.简介
2.如何使⽤插件
3.学习开源常⻅插件

14. 项⽬

DevOps - 主机⽣命周期管理

⼤数据⾃动化任务流 - 性能测试和优化

15. 不定期加餐（后期补录的视频）