数据流开发进阶宝典视频课程

了解大数据数据流涉及的组件,使用这些组件开发数据摄取作业

309人学习

中级12课时2019/01/15更新

二维码下载学堂APP缓存视频离线看

马彦平
    • 畅销套餐
    • 精选套餐
    • 人气套餐
    • 尊享套餐
    • 高薪套餐
大数据开发必知必会
Java语言核心知识筑基宝典视频课程
16894人学习
¥99.00
大数据方向Hadoop核心知识进阶宝典——HDFS、MapReduce、YARN视频课程
7698人学习
¥199.00
Spark开发核心技能进阶宝典
1351人学习
¥199.00
更 多 9 门 课 程
大数据运维必知必会
大数据方向计算机知识筑基宝典系列视频课程
3527人学习
¥99.00
Java语言核心知识筑基宝典视频课程
16894人学习
¥99.00
大数据方向Hadoop核心知识进阶宝典——HDFS、MapReduce、YARN视频课程
7698人学习
¥199.00
更 多 7 门 课 程
GoldenGate+ETL/Kettle专题(92个项目)
GoldenGate数据库容灾迁移01(OGG同构异构、数据库迁移、数据同步、容灾复制)
161157人学习
¥998.00
GoldenGate数据库容灾迁移02(OGG同构异构、数据库迁移、数据同步、容灾复制)
42384人学习
¥889.00
GoldenGate数据库容灾迁移03(OGG同构异构、数据库迁移、数据同步、容灾复制)
22303人学习
¥889.00
更 多 7 门 课 程
大数据运维架构师实战培训专题2.0
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
77912人学习
¥499.00
大数据运维架构师培训(2):Hbase,Hive, Phoenix,Pig,Impala,Kudu
30778人学习
¥333.00
大数据运维架构师培训(3):Spark,Flink, Storm,Kafka,Solr
29582人学习
¥399.00
更 多 12 门 课 程
大数据运维架构师实战培训专题2.0
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
77912人学习
¥499.00
大数据运维架构师培训(2):Hbase,Hive, Phoenix,Pig,Impala,Kudu
30778人学习
¥333.00
大数据运维架构师培训(3):Spark,Flink, Storm,Kafka,Solr
29582人学习
¥399.00
更 多 12 门 课 程
  • 课程介绍
  • 课程大纲

适合人群:

已学习过我们的入门课程,准备从事大数据方向工作的行业新人

你将会学到:

了解大数据数据流涉及的组件,使用这些组件开发数据摄取作业

课程简介:

本课程针对大数据数据流涉及到的组件,介绍这些组件的适用范围、重点参数、使用方式等,所有组件都结合实例进行演示。

除了大数据领域极为常用的Flume、Kafka外,我们还率先介绍了StreamSets这种新一代的数据摄取组件。还会学习一下与多种流处理系统紧密相关的Zookeeper。

在这门课中,还介绍了一些大数据数据流方向可能会选择的其他组件,为架构选型或进一步学习提供参考。

课程附件及解压密码在视频zui后一讲中提供。


课程体系图-18.png

展开更多

课程大纲-数据流开发进阶宝典视频课程

  • 1

    大数据数据流的架构和组件介绍大数据数据流的基本概念、特征、典型架构,以及简要介绍其涉及的各种组件。

    「仅限付费用户」点击下载“18-1 大数据数据流的架构和组件.pdf”

    [22:40]
  • 2

    Flume简介和常用功能介绍Flume的适用范围、特性、主要部件等,并介绍几种常用Source、Sink、Channel的用法和配置项。

    「仅限付费用户」点击下载“18-2 Flume简介和常用功能.pdf”

    [39:06]
  • 3

    Flume配置案例演示两个Flume案例,一个是从本地磁盘采集到HDFS;另一个是使用agent级联,先接收http请求并用avro输出,再用avro输入并写成磁盘文件。

    「仅限付费用户」点击下载“18-3 Flume配置案例.pdf”

    [29:24]
  • 4

    StreamSets简介和常用部件介绍StreamSets的适用范围、与Flume对比的优势,并介绍几种常用源端、目标端的用法和配置项。

    「仅限付费用户」点击下载“18-4 StreamSets简介和常用部件.pdf”

    [38:05]
  • 5

    StreamSets配置案例演示两个StreamSets案例,一个是从本地磁盘采集到HDFS;另一个是从Mysql binlog实时采集进Hive。

    「仅限付费用户」点击下载“18-5 StreamSets配置案例.pdf”

    [38:13]
  • 6

    Kafka简介介绍Kafka的作用、版本、以及Topic、Log、Producer、Consumer等核心概念。

    「仅限付费用户」点击下载“18-6 Kafka简介.pdf”

    [27:32]
  • 7

    Kafka常用配置介绍Kafka的常用配置,分为Broker、Producer、Consumer三类进行讲解。

    「仅限付费用户」点击下载“18-7 Kafka常用配置.pdf”

    [48:36]
  • 8

    Kafka的命令行API和Java API介绍并演示Kafka的命令行API、Java API的用法。

    「仅限付费用户」点击下载“18-8 Kafka的命令行API和Java API.pdf”

    [30:25]
  • 9

    Zookeeper简介和常用配置介绍Zookeeper的作用和核心概念、常用配置。

    「仅限付费用户」点击下载“18-9 Zookeeper简介和常用配置.pdf”

    [29:50]
  • 10

    Zookeeper的API使用介绍并演示Zookeeper的命令行API、Java API的用法。

    「仅限付费用户」点击下载“18-10 Zookeeper的API使用.pdf”

    [18:21]
  • 11

    大数据数据流的其他选择从数据摄取组件、消息队列组件、其他组件三方面介绍大数据数据流的其他选择,为架构选型或进一步学习提供参考。

    「仅限付费用户」点击下载“18-11 大数据数据流的其他选择.pdf”

    [12:47]
  • 12

    课程配套资源

    「仅限付费用户」点击下载“数据流开发-数萌教育小马哥.zip”

    [00:30]
在线
客服
APP
下载

下载Android客户端

下载iphone 客户端

官方
微信

关注官方微信

返回
顶部