06.基于Linux平台的PDI(Kettle)安装配置
- ETL之PDI/Kettle数据处理
- PDI/Kettle常用数据库迁移
- PDI/Kettle数据抽取转换
- Oracle数据异构迁移
- MySQL数据异构迁移
- DB2数据异构迁移
- PostgreSQL数据异构迁移
- SQLServer数据异构迁移
- MongoDB数据异构迁移
一、风哥大数据运维架构师实战培训专题2.0介绍
课程背景:
为满足想学习和掌握大数据运维与体系架构的学员,风哥特别设计的一套比较系统的大数据库运维培训课程。
课程目标:
本套风哥大数据运维架构师实战培训课程,分5个阶段,分别是大数据Hadoop核心架构运维实战、大数据存储管理与查询分析实战、大数据计算框架与消息搜索实战、大数据安全调度与数据采集实战、大数据集群管理平台运维实战。学完本套风哥大数据课程可以熟悉Hadoop大数据生态技术框架,包括Cloudera CM/CDH/CDP、HDFS、Yarn、HBase、Hive、Phoenix、Zookeeper、Kafka、Solr、Spark、Flink、Storm、Flume、Sqoop、ETL/Kettle、ELK、Azkaban、Oozie、Ranger等组件安装配置与日常维护管理,同时熟悉ElasticSearch、ClickHouse、GreenPlum、TiDB等OLAP分布式大数据平台的建设与维护。
风哥大数据运维架构师实战培训专题2.0 | ||
专题链接:https://edu.51cto.com/topic/4539.html | ||
阶段列表 | 课程大纲 | 单个课程学习地址 |
第一阶段 大数据Hadoop核心架构运维实战 | 大数据基础与解决方案 | https://edu.51cto.com/course/27367.html |
大数据平台运行环境规划 | ||
Zookeeper | ||
Hadoop(HDFS,MR,Yarn) | ||
第二阶段 大数据存储管理与查询分析实战 | Hbase | https://edu.51cto.com/course/27368.html |
Phoenix | ||
Hive | ||
Pig | ||
Impala | ||
Kudu | ||
专题2.0附1:MySQL基础 | https://edu.51cto.com/course/17895.html | |
专题2.0附2:GreenPlum | https://edu.51cto.com/course/23050.html | |
专题2.0附3:TiDB | https://edu.51cto.com/course/25659.html | |
专题2.0附4:ClickHouse | https://edu.51cto.com/course/26149.html | |
第三阶段 大数据计算框架与消息搜索实战 | Spark | https://edu.51cto.com/course/27366.html |
Flink | ||
Storm | ||
Tez | ||
Kafka | ||
Solr | ||
专题2.0附5:ElasticSearch | https://edu.51cto.com/course/25184.html | |
专题2.0附6:ELK | https://edu.51cto.com/course/25183.html | |
第四阶段 大数据安全调度与数据采集实战 | Flume | https://edu.51cto.com/course/27365.html |
Sqoop | ||
Azkaban | ||
Oozie | ||
Ranger | ||
专题附7:ETL/Kettle | https://edu.51cto.com/course/25920.html | |
第五阶段 大数据集群管理平台运维实战 | Cloudera CM | https://edu.51cto.com/course/27364.html |
Cloudera CDH/CDP |
二、ETL之PDI/Kettle培训实战教程-57个案例(数据迁移、抽取同步、转换加载)视频教程
课程目标:
为满足想学习和掌握ETL数据处理技术学员,风哥特别设计的一套比较系统的PDI(Kettle)数据库迁移同步、数据抽取转换加载培训课程;
本套PDI(Kettle)课程共计13小时,57种实战案例,涉及常用的6种数据库,内容涉及通过PDI(Kettle)实现常用数据库Oracle、MySQL、PostgreSQL、DB2、SQLServer、MongoDB、Excel、TXT等各种数据处理、迁移同步、抽取转换、清洗加载等,适合运维人员/数据库/开发人员用于实际项目工作之中,解决异构数据库之间的数据整合与处理。
欢迎加入:
51CTO学堂Oracle/MySQL/ETL数据库学习专用QQ群:787523185、 602580662
三、ETL之PDI/Kettle培训实战教程-57个案例(数据迁移、抽取同步、转换加载)视频教程,风哥视频教程学习大纲
1.ETL与Kettle基础知识
1)ELT数据处理基础知识
2)PDI/Kettle产品介绍
2.Kettle数据处理实战环境准备
3.Kettle安装配置与功能讲解
1)基于Windows平台的Kettle安装配置
2)基于Linux平台的Kettle安装配置
3)Kettle资源库的配置与管理
4)Kettle常用功能讲解
4.Kettle常用数据库连接配置
1)配置Oracle数据库连接
2)配置MySQL数据库连接
3)配置PostgreSQL数据库连接
4)配置SQLServer数据库连接
5)配置DB2数据库连接
6)配置MongoDB数据库连接
5.数据库迁移同步/数据加载转换(57个案例)
5.1.Oracle数据迁移同步与数据加载转换
1)Oracle11g to Oracle19c
2)Oracle to MySQL
3)Oracle to PostgreSQL
4)Oracle to SQLServer
5)Oracle to MongoDB
6)Oracle to DB2
7)Oracle to SQLFile
8)Oracle to Excel
9)Oracle to TXT
5.2.MySQL数据迁移同步与数据加载转换
1)MySQL5.7 to MySQL8.0
2)MySQL to Oracle
3)MySQL to PostgreSQL
4)MySQL to SQLServer
5)MySQL to DB2
6)MySQL to MongoDB
5.3.PostgreSQL数据迁移同步与数据加载转换
1)PostgreSQL to Oracle
2)PostgreSQL to MySQL
3)PostgreSQL to SQLServer
4)PostgreSQL to DB2
5)PostgreSQL to MongoDB
5.4.SQLServer数据迁移同步与数据加载转换
1)SQLServer to Oracle
2)SQLServer to MySQL
3)SQLServer to PostgreSQL
4)SQLServer to DB2
5)SQLServer to MongoDB
5.5.DB2数据迁移同步与数据加载转换
1)DB2 to Oracle
2)DB2 to MySQL
3)DB2 to PostgreSQL
4)DB2 to SQLServer
5.6.MongoDB数据迁移同步与数据加载转换
1)MongoDB to Oracle
2)MongoDB to MySQL
3)MongoDB to PostgreSQL
4)MongoDB to SQLServer
5.7.Excel表格数据加载处理
1)Excel to Oracle
2)Excel to MySQL
3)Excel to PostgreSQL
4)Excel to SQLServer
5)Excel to MongoDB
6)Excel to DB2
5.8.TXT文本文件数据加载处理
1)TXT to Oracle
2)TXT to MySQL
4)TXT to MongoDB
四、风哥Oracle/MySQL/NoSQL培训班系列课程(系统、案例、实战)
1)Oracle云数据库工程师培训班课程_学习指南_职业规划_待遇
免费试听:https://edu.51cto.com/course/7015.html
报名咨询:https://edu.51cto.com/mic-position/131.html
2)MySQL数据库工程师培训班课程_学习指南_职业规划_待遇
免费试听:https://edu.51cto.com/course/7015.html
报名咨询:https://edu.51cto.com/mic-position/303.html
3)双数据库(Oracle+MySQL)培训班系列教程分享1.5(定期更新)
http://www.fgedu.net.cn/oracle.html
#########################################################################################
Oracle培训班系列课程
------------------------------------
Oracle数据库教程(第一部分):Oracle之Linux系统入门
特色:本阶段内容为Linux入门基础,是Oracle门槛学习必备技能。
https://edu.51cto.com/topic/1112.html
Oracle数据库教程(第二部分):Oracle安装配置与集群实施
特色:本阶段部分内容为OCP/OCM课程内容,以企业实战项目为主导讲解,实用性更强。
https://edu.51cto.com/topic/1113.html
Oracle数据库教程(第三部分):Oracle基础深入与核心技术
特色:本阶段课程深度已超OCP/OCM课程的内容,部分内容是用来培训Oracle原
厂高级售后工程师的。
https://edu.51cto.com/topic/1114.html
Oracle数据库教程(第四部分):Oracle备份恢复与数据迁移
特色:本阶段的实用性已超OCP/OCM课程的内容,大量备份与恢复的案例,RAC
环境下ASM的日常维护与迁移。
https://edu.51cto.com/topic/1115.html
Oracle数据库教程(第五部分):Oracle对象管理与SQL基础
特色:本阶段内容为OCP课程内容,但实用性超OCP课程。
https://edu.51cto.com/topic/1116.html
Oracle数据库教程(第六部分):Oracle性能优化与调整
特色:本阶段大部分内容为OCM课程内容,但实用性超OCM认证课程,涉及千W级数
据量。
https://edu.51cto.com/topic/1117.html
Oracle数据库教程(第七部分):Oracle容灾实施与数据复制
特色:本阶段大部分内容为OCM课程内容,但实用性超OCM认证课程,涉及千W级数
据量。
https://edu.51cto.com/topic/1118.html
Oracle数据库教程(第八部分):应用系统综合项目
特色:本阶段内容为Oracle数据库的增值技能中间件应用技术,是Oracle数据库工程师的
综合技能,也是职位竞争和**的必备技能。
https://edu.51cto.com/topic/1120.html
Oracle数据库教程(12.2新课):Oracle 12cR2项目实战系列
(特色:本阶段内容为Oracle 12.2数据库的新技术,是Oracle云数据库项目的技能。 )
https://edu.51cto.com/topic/1293.html
MySQL培训班系列课程
#######################################################################
MySQL数据库教程(第一部分):MySQL数据库必备Linux基础系列
https://edu.51cto.com/topic/1564.html
MySQL数据库教程(第二部分):MySQL数据库基础入门与项目实战
https://edu.51cto.com/topic/1429.html
MySQL数据库教程(第三部分):MySQL数据库SQL语言开发与应用实战
https://edu.51cto.com/topic/1475.html
MySQL数据库教程(第四部分):MySQL数据库基础深入与核心解析
https://edu.51cto.com/topic/1498.html
MySQL数据库教程(第五部分):MySQL数据库备份与恢复实战
https://edu.51cto.com/topic/1524.html
MySQL数据库教程(第六部分):MySQL高可用复制与分布式集群架构
https://edu.51cto.com/topic/1622.html
本阶段的课程,且是目前互联网主架构,涉及多台服务器,近百个数据库,千W级数据量的项目实验。
MySQL数据库教程(第七部分):MySQL性能优化与故障诊断
https://edu.51cto.com/mic-position/303.html
MySQL数据库教程(第八部分++):敬请观注风哥MySQL微职位培训班
NoSQL数据库(Redis、MongoDB、Memcached)
#########################################################
风哥其它数据库课程
#######################################################################
1)PostgreSQL数据库培训课程: https://edu.51cto.com/course/22644.html
2)GreenPlum数据库培训课程: https://edu.51cto.com/course/23050.html
3)IBM DB2数据库培训课程: https://edu.51cto.com/course/23448.html
4)SQLServer数据库培训课程: https://edu.51cto.com/course/23927.html
5)GaussDB数据库培训课程: https://edu.51cto.com/course/22140.html
6)Elasticsearch+ELK分布式数据库培训课程:
https://edu.51cto.com/course/25184.html
https://edu.51cto.com/course/25183.html
7)TIDB数据库培训课程:
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
课程大纲
- 第一章 1.ETL与PDI(Kettle)基础知识
- 1-1试看 01.ETL数据处理之PDI-Kettle课程介绍51cto17:40
- 1-2试看 02.ETL数据处理基础知识-51cto风哥10:51
- 1-303.PDI(Kettle)基础知识-51cto风哥15:09
- 第二章 2.PDI(Kettle)数据处理实战环境准备
- 2-104.Kettle数据处理实战数据库环境准备30:52
- 第三章 3.PDI(Kettle)安装配置与功能讲解
- 3-105.基于Windows平台的PDI(Kettle)安装配置13:19
- 3-206.基于Linux平台的PDI(Kettle)安装配置11:07
- 3-307.PDI(Kettle)资源库的配置与管理0117:13
- 3-408.PDI(Kettle)资源库的配置与管理0215:35
- 3-509.PDI(Kettle)常用功能菜单介绍12:51
- 第四章 4.PDI(Kettle)常用数据库连接配置
- 4-110.PDI(Kettle)常用数据库连接配置与数据类型说明26:20
![ETL之PDI/Kettle培训实战教程-57个案例(数据迁移、抽取同步、转换加载)](https://s2.51cto.com/images/202011/22/f7e22158aa321ff99ab6e44e553c258d.png?x-oss-process=image)
![ArcGIS10.X入门实战视频教程(GIS思维)](https://s2.51cto.com/images/201605/e46229b14e3fed58d86170ea06caee12687195.jpg?x-oss-process=image)
![Python数据分析--玩转Pandas(2024版)](https://s2.51cto.com/images/202011/05/02405acbc752e3d1565b84d2595c52b6.png?x-oss-process=image)
![Mapgis6.7基础视频教程(免费看21集)](https://s2.51cto.com/images/202103/02/eb8e65f9be09f202ddda448cc3f85a2d.jpg?x-oss-process=image)
![ElasticSearch6.6.x基础与企业开发](https://s2.51cto.com/images/202103/01/a89675a0b6e002b427ca03035fcb95bf.jpg?x-oss-process=image)
![零基础--PowerBI DAX数据分析小能手](https://s2.51cto.com/images/avater/202309/06c75f446cccc7ca0496133cae0f64f9e5ec99.jpg?x-oss-process=image)
![ETL数据集成之Kettle5项目实践视频课程](https://s2.51cto.com/images/202008/18/9e0a302a057ab9c211624d7d317d619b.png?x-oss-process=image)
![Python数据分析与爬虫](https://s2.51cto.com/images/201905/09/b7116454c9a101da9cedfcd51d8ccd6e.jpg?x-oss-process=image)