专题 > 大数据 > Spark > 大数据架构师完整教程(hadoop、spark、flink)

大数据架构师完整教程(hadoop、spark、flink)

学员完全掌握后,可以满足企业的大数据开发工程师用人需求,成为企业中高级大数据开发工程师,最高年薪可达50万,掌握一般程度也能满足企业需求,收入在8-12K,完全掌握15-40K以上。

22

门课程

993

人学习

318小时36分钟

课程总时长

徐培成

特级讲师

讲师评分:4.8

永久观看
 
系统化学习
 
24小时答疑
  资料一键下载
专题价 ¥1349
立省1953元

支持蚂蚁花呗分期

简单5步马上享受花呗分期:

1. 点击立即购买
2. 订单确认页, 点击 ”去支付“
3. 支付中心, 使用【支付宝】付款
4. 使用【支付宝】APP扫描付款二维码
5. 付款方式选择 花呗分期~ 搞定~

查看详情>>
总价 ¥3302

第一阶段:  大数据入门教程部分

1门课程 52小时

快速掌握java精髓

  • 2018年大数据架构师系列教程之Java视频课程(经典)

    96节 52小时
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。配套资料已经上传,下载为完整版课程笔记和资料。本章节为大数据架构师课程的JavaSE、MySQL、JDBC课程,大数据的开发离不开JavaSE、MySQL、JDBC,本套课程通过通俗易懂的方式让你快速掌握JavaSE、MySQL、JDBC技术,夯实基础。课程亮点:反射、内省、设计模式、NIOHashmap原理、JVM、QQ聊天案例连接池、存储过程、隔离级别课程截图:

    课程大纲

    免费试看

第二阶段:  大数据hadoop生态体系

8门课程 101小时30分钟

掌握hadoop生态体系:linux、hadoop、hive、Avro-pb、zk、redis、hbase、Phoenix

  • 2018年大数据架构师系列教程之Linux教程

    13节 5小时43分钟
    课程目标:
    本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的linux课程,大数据生态体系庞大,通过本章节linux的讲授,你可以轻松的掌握linux技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。本套Lniux可以让走捷径,不用再去选择,学习完本套教程完全具备大数据课程的学习基础。02linuxbig9-02Linux-day0101.vmware02.linux基础-常用命令-目录-权限03.linux常用命令-修改主机名04.linux-mount-yum-本地安装软件包05.linux-修改静态ip-nano06.linux-修改命令行提示符07.linux-权限-chmod-chown08.linux-tar-gzip-gunzip-find09.linux-安装jdk-配置环境变量-验证jdkbig9-02Linux-day0201.for99表格02.while99表格03.脚本参数控制04.aliyun仓库-nc2018年大数据架构师系列教程(贺岁版)01java- http://edu.51cto.com/course/15326.html02linux- http://edu.51cto.com/course/15260.html03hadoop- http://edu.51cto.com/course/15262.htmlhive-  http://edu.51cto.com/course/15261.html04avro-pb- http://edu.51cto.com/course/15264.html05zookeeper- http://edu.51cto.com/course/15263.html06hbase- http://edu.51cto.com/course/15321.htmlphoenix- http://edu.51cto.com/course/15353.html07redis-08ganglia- http://edu.51cto.com/course/15253.html09flume- http://edu.51cto.com/course/15259.html10sqoop- http://edu.51cto.com/course/15258.html11kafka- http://edu.51cto.com/course/15257.html12SSM- http://edu.51cto.com/course/15265.html13scala- http://edu.51cto.com/course/15242.html14spark-15python+人工智能 - http://edu.51cto.com/course/15269.html16umeng http://edu.51cto.com/course/15360.html

    课程大纲

    免费试看

  • 2018年徐培成大数据架构师系列教程之Hadoop教程

    79节 42小时56分钟
    课程目标:
    本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的Hadoop课程,大数据生态体系庞大,通过本章节Hadoop的讲授,你可以轻松的掌握Hadoop技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。本套Hadoop视频教程适合任何想从事大数据开发的人员学习,不管是否有工作经验还是零基础,都应该掌握本套Hadoop教程。

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Hive教程

    29节 16小时25分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的hive课程,大数据生态体系庞大,通过本章节hive的讲授,你可以轻松的掌握hive技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。这套Hive绝对三脚猫功夫,真正用心打磨出来,帮助更多的大数据技术爱好者少走弯路。本套教程适合任何想学习Hive的学子。big9-03hive-day0101.hive介绍02.hive安装与初始化03.hive基本操作04.hive脚本分析-hiveserver2-beeline05.idea下jdbc API编程访问hiveserver206.hive数据类型-外部表内部表-加载数据-删除表07.hive-函数-explode函数-实现wordcount08.hive-显式表头-修改hadoop静态用户名09.hive-复制表-CTAS10.hive-分区表11.hive-连接查询-sql执行过程分析big9-03hive-day0201.桶表02.map端连接-查询暗示-自动转换配置03.严格检查04.导出导入05.排序-sort-order-distribute-cluster06.函数-时间函数-集合函数-复杂类型函数07.lateral view-虚列08.事务支持09.mysql精确查询时间设置10.高级聚合函数-groupingset-rollup-cube11.分析函数-开窗函数-range-rowsbig9-03hive-day0301.采样-随机-桶-block02.explain sql解释03.索引和文件格式-rcfile-orc-parquet04.combinefileinputformat有问题-map端合并big9-03hive-day0401.google pb多对象读写-hive查询优化02.distributeby-sortby全排序-动态分区03.自定义函数-add2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Avro-pb教程(必须掌握)

    4节 1小时50分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的avro-pb课程,大数据生态体系庞大,通过本章节avro-pb的讲授,你可以轻松的掌握avro-pb技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。市面上很少有avro-pb这个教程内容,本套avro-pb教程弥补了行业空白,让大家能够通过视频掌握avro-pb技术。04avro-pb01.avro使用-编译串行化-反串02.avro串行化-反串-和java性能评测03.google pb基础04.google pb性能评测2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Hbase教程

    41节 21小时22分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。  本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。  本章节为大数据架构师课程的Hbase课程,大数据生态体系庞大,通过本章节Hbase的讲授,你可以轻松的掌握Hbase技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。 这套Hbase绝对三脚猫功夫,真正用心打磨出来,帮助更多的大数据技术爱好者少走弯路。big9-05hbase-day0101.hbase介绍-集群搭建02.hbase配置03.awk命令-xkill脚本实现04.重新初始化hbase05.重新初始化hbase206.hbase shell使用07.hbase API使用big9-05hbase-day0201.hbase脚本-HA配置02.hbase架构-meta表-split03.hbase区域管理04.hbase client写入过程剖析05.hbase批量写入06.hbase架构分析07.hbase查询优化08.hbaseBatch-cache验证09.hivetaggen函数-注册使用big9-05hbase-day0301.回顾-hive标签生成实现02.hbase过滤器03.hbase复杂过滤查询-分页过滤器04.hbase的计数器操作05.hbase的计数器操作206.hbase统计操作-deleteall07.hbase原生扫描-时间戳范围检索-MaxVersion-MajorCompact08.hbaseTTL-MIN_VERSIONS09.hbase Keep_deleted_cells10.hbaseregion-assign11.hbase协处理器-regionobserver12.hbase并发put-sql分析big9-05hbase-day0401.编程添加协处理器02.rowkey设计原则-CallLogs项目分析03.calllogs实现04.callLogs-get-scan方法重写05.callLogs模拟数据06.动态添加协处理器-时间处理big9-05hbase-day0501.hbase重新初始化-回顾02.hbase范围查询通话记录实现03.hbase作为input实现wordcount04.hbase在yarn上执行mr05.hbase在yarn执行在s101上执行配置06.hbase数据迁移-bulkload07.hive操纵hbase数据-HbaseStoreagehandler

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Phoenix视频课程

    7节 4小时38分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。  本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。   本章节为大数据架构师课程的phoenix课程,大数据生态体系庞大,通过本章节phoenix的讲授,你可以轻松的掌握phoenix技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。 这套phoenix绝对三脚猫功夫,真正用心打磨出来,帮助更多的大数据技术爱好者少走弯路。

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Zookeeper教程

    8节 2小时22分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的zookeeper课程,大数据生态体系庞大,通过本章节zookeeper的讲授,你可以轻松的掌握zookeeper技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。这套zookeeper绝对三脚猫功夫,真正用心打磨出来,帮助更多的大数据技术爱好者少走弯路。05zkbig9-02zookeeper-day0101.zk介绍-本地模式搭建02.zk完全分布式集群搭建03.zkCli命令行操作04.zk节点类型05.zk API访问big9-02zookeeper-day0201.zk API-get-set-递归遍历-观察者02.zk观察者重复消费-inspector软件03.zk leader快速选举原理2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Redis教程

    15节 6小时10分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 Redis01.redis简介-windows安装02.redis Linux下编译安装03.redis常用命令-保护模式-client API访问04.redis hash类型05.redis list类型06.redis set集合-sorted_set集合07.redis sorted_set-string08.redis事务09.redis发布订阅10.redis中存放图片11.redis watch观测key对事务的干扰12.redis搭建集群13.redis集群client API14.redis集群修改命令-client clusterAPI-权限问题Gangliaganglia安装ganglia配置ganglia使用2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

第三阶段:  大数据提高阶段

5门课程 35小时44分钟

掌握flume、sqoop、kafka、ssm、storm

  • 2018年大数据架构师系列教程之Flume教程

    20节 7小时49分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的Flume课程,大数据生态体系庞大,通过本章节Flume的讲授,你可以轻松的掌握Flume技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的企业开发思维。09flumebig9-09flume-day0101.flume-简介-安装02.flume-使用nc源-内存通道-logger sink体验flume日志收集03.flume-常用源-seq-stress-spooldir04.flume-常用源-exec-实时收集05.flume-常用sink-fileRoll06.flume-常用sink-hdfsSink07.flume-常用sink-hiveSink(问题)08.flume-常用sink-hbasesink09.flume-常用sink-hbasesink-正则字段名称指定-rowkey指定10.flume-常用通道-memory-file11.flume-自定义sink-验证file通道big9-09flume-day0201.flume-高级应用-hop跃点-avroSource-avroSink02.flume拦截器-内置拦截器-host-timestamp-static03.flume-avroSource-avroc-client配合使用04.flume-selector-replicating05.flume-selector-multi06.flume-sinkProcessor-failover07.flume-sinkProcessor-lb-roundrobin-random08.flume-自定义拦截器-限速拦截器09.flume-自定义拦截器-限速拦截器-运行时动态修改-zk2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Sqoop视频课程

    7节 1小时45分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套Sqoop为徐培成老师亲自讲授,为大数据架构师班的Sqoop部分,可以让你快速掌握Sqoop技术,本系列教程适合在职和想从事大数据开发的人群。课程的配套资料购买后可以下载。Sqoop课程目录:01.sqoop-简介-安装02.sqoop-import03.sqoop-import增量导入04.sqoop-import hive导入05.sqoop-import hbase06.sqoop-import job(问题)07.sqoop-job问题-hbase导入问题解决办法

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之Kafka教程

    19节 7小时
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的kafka课程,大数据生态体系庞大,通过本章节kafka的讲授,你可以轻松的掌握kafka技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。11kafkabig9-11kafka-day0101.kafka-jms-介绍02.kafka安装03.kafka配置与启动04.kafka集群脚本编写05.kafka消息生产与消费-主题创建06.kafka主题-分区-副本对应关系07.编写生产者代码08.新型API生产者09.验证ack回执10.kafka消息生产这的分区选择算法11.kafka 消费者客户端12.kafka group.id与消费能力控制13.kafka新版消费空间控制-assign-subscribebig9-11kafka-day0201.kafka容灾能力测试02.kafka集成flume-sink方式03.kafka集成flume-source方式04.kafka集成flume-channel方式05.kafka从指定位置开始消费06.kafka实现bc屏广2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 2018年大数据架构师系列教程之SSM教程

    37节 12小时45分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。配套资料已经上传,下载为完整版课程笔记和资料。本章节为大数据架构师课程的SSM课程,大数据的开发离不开Java,本套课程通过通俗易懂的方式让你快速掌握SSM技术,夯实基础。12SSMbig9-12SSM-Mybatis-day0100.大数据技术体系划分-ssm01.MyBatis-CRUD-别名02.ssm-mybatis03.ssm-多对一关联关系04.ssm-多级一对多关联05.ssm-自关联06.ssm-多对多关联关系07.ssm-分页查询big9-12SSM-day02Sping01.体验spring02.spring-bean范围03.spring-aop编程04.spring-aop编程-after-around-throws通知05.spring-aop编程-xml-javabean结合开发aop06.SM整合流程07.安装tomcat08.IDEA下web项目初始化与运行配置09.springmvc架构10.springmvc-运行配置注意事项11.springmvc-参数传递big9-12SSM-day03整合01.SSM整合流程02.SSM整合-用户注册实现03.SSM整合-自定义上下文名称-jstl标签库04.SSM整合-向页面传参Model-样式05.SSM整合-forward-redirect06.SSM整合-编辑用户07.SSM整合-保存用户08.SSM整合-删除用户09.IDEA下正确删除和导入模块10.SSM-分页处理11.SSM-中文乱码字符过滤器12.SSM-SpringMVC静态资源13.SSM-SpringMVC-CSS引进14.SSM-web数据范围-application-session-request-page15.SSM-登录控制16.SSM-hbase-calllogs测试17.SSM-hbase-calllogs集成18.SSM-hbase-calllog-主被叫处理2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 徐培成最新课程大数据之Storm系列视频教程

    21节 6小时23分钟
    课程目标:
    课程内容课程大纲Storm第一部分 01.storm介绍.avi 02.storm术语解释-架构.avi 03.storm安装.avi 04.配置storm集群.avi 05.启动storm集群.avi 06.storm nimbus HA配置与切换演示.avi 07.编写callog程序演示storm工作流程.avi 08.部署到storm集群上运行.aviStorm第二部分01.回顾-top杀死.avi02.使用storm实现实时wordcount-phoenix进行存储.avi03.实现切割bolt和counterBolt-使用hbase的计数器进行存储.avi04.准备环境-执行app-ncsocket.avi05.修改pom文件-去掉nc方式2.avi06.并发介绍-配置.avi07.使用idea将多个模块编译打包成一个jar.avi08.分析节点间worker-thread-task之间的分配情况.avi09.storm的再平衡处理.avi10.storm分组-shuffle-fields.avi11.storm分组-all-global-direct.avi12.消息确保消费.avi13.storm和kafka集成.avi

    课程大纲

    免费试看

第四阶段:  大数据Spark+Flink生态体系

3门课程 41小时17分钟

掌握Scala、Spark、flink

  • 2018年大数据架构师系列教程之Scala教程

    41节 12小时42分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 big9-13scala-day0101.scala介绍-安装02.scala基础03.scala-控制语句-for-while04.scala-过程-lazy-带名函数参数big9-13scala-day0201.Array-ArrayBuffer02.遍历数组-常用函数03.多维数组-不规则数组04.java和scala集合的互操作05.元组-映射-对偶06.zip操作07.scala中的类定义-主构造-辅助构造-参数08.scala单例对象-伴生对象-app执行类09.idea下安装scala插件10.scala面向对象-class-object-trait-with-extends11.包和导入12.Null和null13.Nothing和Nil关系13.Unit和值14.文件-正则-进程控制15.trait-自身类型-selftype16.操作符-中置-一元-前置17.右操作符18.反解析-unapply-apply19.高阶函数-map-filterbig9-13scala-day0301.高阶函数-回顾02.函数柯里化03.高级函数-控制抽象-换名调用表示法04.高级函数-常用集合操作-化简折叠05.模式匹配06.提取器07.样例类-样例对象08.样例类-密封样例类09.Option-None-Some10.偏函数-PartialFunction11.泛型-类-方法泛型12.泛型-上限-下限-视图界定13.型变-协变-逆变14.隐式转换函数-隐式参数-隐式值15.scala实现单词统计16.排序-list转换-分组big9-13scala-day0401.scala实现标签生成2018年大数据架构师系列教程(贺岁版)01java-02linux-03hadoop-hive-04avro-pb-05zookeeper-06hbase-phoenix-07redis-08ganglia-09flume-10sqoop-11kafka-12SSM-13scala-14spark-15python-16umeng

    课程大纲

    免费试看

  • 徐培成大数据之Spark2.0系列视频课程

    81节 27小时21分钟
    课程目标:
    spark课程内容课程内容介绍spark第一部分 01.spark介绍.avi 02.spark实现wordcount.avi 03.spark实现wordcount过滤指定字符.avi 04.在idea下开发scala的spark程序.avi 05.idea下java版wordcount.avispark第二部分 01.Spark RDD介绍.avi 02.spark笔记.txt 02.搭建spark standaone模式集群.avi 03.spark进程管理命令.avi 04.spark独立模式整合hadoop HA并实现hdfs文件加载计算.avi 05.spark 提交作业.avi 06.spark并行计算打印结果考察.avi 07.spark RDD介绍-RDD变换.avi 08.spark mapPartitions.avi 09.mapPartitionsWithIndex.avi 10.sample.avi 11.union-intersection-distinct.avi 12.groupByKey.avi 13.计算班级的统计分数.avi 14.aggregateByKey.avi 15.sortByKey.avi 16.sortBy-groupBy一般性方法.avi 17.join.avi 18.cogroup协分组.avi 19.笛卡尔积连接.avispark第三部分01.pipe.avi02.减少分区和再分区.avi03.再分区并分区内排序.avi04.action-reduce-take-first-count.avi05.action-保存成文本和seq文件.avi06.action-countBykey-saveSeq.avi07.sparkcontext-作业启动-master模式-并发度.avi08.DAG调度器-stage阶段分析.avi09.宽依赖-窄依赖.avi10.DAG调度器-task调度器.avi11.ActiveJob-Stage-Task.avi12.SparkJob提交流程分析-1.avi13.SparkJob提交流程分析-2.avi14.SparkJob提交流程分析-3.avi15.SparkJob提交流程分析-4.avi16.SparkJob提交流程分析-5.avispark第四部分01.spark job提交回顾-1.avi02.spark job提交回顾-2-inbox创建过程.avi03.spark job提交回顾-3-事件处理过程.avi04.spark job提交回顾-4-总结.avi05.RDD持久化.avi06.RDD持久化-disk.avi07.RDD持久化-测试map-flatMap.avi08.完全分布式下持久化操作.avi09.累加器.avi10.广播变量.avi11.百度外卖标签生成程序.avi12.百度外卖标签生成程序2.avi13.百度外卖标签生成程序3-商家结果全排序.avi14.spark job的部署模式.avi15.spark yarn模式.avispark第五部分 01.标签生成java版.avi 02.Spark master节点HA配置.avi 03.Spark master节点HA容灾演练.avi 04.Spark SQL演示.avi 05.Spark SQL customer样例演示.avi 06.Spark SQL 常见查询.avi 07.Spark SQL Scala编程.avi 08.Spark SQL DataFrameAPI编程.avi 09.Spark SQL parquet-json-jdbc访问.avi 10.配置spark成为分布式查询引擎-hive整合.avi 11.配置spark成为分布式查询引擎-hive整合-自定义函数有问题.avi 12.Spark SQL ThriftServer客户端 API使用hive-jdbc类库.avi 13.spark的textFile方法源代码分析.avispark第六部分01.Spark stream介绍.avi02.体验Spark stream计算-文本流.avi03.体验Spark stream-java版编程流计算.avi04.DStream-注意事项.avi05.spark流计算-窗口化计算.avi06.窗口化操作API.avi07.spark-streaming-updateStateByKey.avi08.spark-streaming-updateStateByKey-2.avi09.spark-streaming-检查点-实验.avi10.spark-streaming-kafka系统集成.avi11.Spark SQL集成hive UDF函数.avi12.SparkSQL集成hiveUDF.avi

    课程大纲

    免费试看

  • Flink从入门到上手企业开发系列视频课程

    19节 1小时13分钟
    课程目标:
    01.flink介绍 02.flink-无界数据集-有界数据集 03.flink-两种执行模型 04.flink-特点 05.flink-特点2 06.flink-流计算模型-有界数据集处理 07.flink-从下到上的架构层次说明 08.flink-datasource-flink-datasink结构 09.flink-总结 10.flink-体验 11.flink-体验-下载flink 12.flink-体验-解压flink 13.flink-体验-启动flink本地集群脚本-验证启动是否成功 14.flink-体验-启动webui查看flink状态 15.flink-编写java版wordcount程序-启动nc-运行程序 16.flink集群运行模式-从IDEA中导出jar包 17.flink集群运行模式-检查flink集群运行状况-传递jar到centos上 18.flink集群运行模式-启动centos上的nc服务器地址-端口指定9999 19.flink程序运行-执行结果查看-注意事项

    课程大纲

    免费试看

第五阶段:  大数据Python+人工智能体系

1门课程 49小时

掌握python和人工智能应用,推荐系统

  • 2018年大数据架构师系列教程之Python+人工智能视频课程

    75节 49小时
    课程目标:
    本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。本章节为大数据架构师课程的Python+人工智能课程,大数据生态体系庞大,通过本章节Python+人工智能的讲授,你可以轻松的掌握Python+人工智能技术,掌握本节内容后可以为后续的大数据案例夯实基础,形成良好的大数据企业开发思维。这套Python+人工智能绝对三脚猫功夫,真正用心打磨出来,结合企业实战案例,内容包含推荐系统、风险评估、自动客服等,通过真实企业级的案例让你将知识融汇贯通,真正与企业接轨。 课程内容包含: Python全集、大数据实战案例推荐系统 、大数据实战案例友盟、人工智能实战案例:风险评估、自动客服,简历指导       。

    课程大纲

    免费试看

第六阶段:  大数据实战项目部分

4门课程 39小时3分钟

掌握电商案例、用户画像、团购标签、友盟企业级案例

  • 2018年大数据综合案例:全新友盟升级版视频课程

    72节 27小时
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。  本套大数据架构师系列教程历经三年打磨,全网最权威的大数据系列教程,全部一个人实操讲解,业界独一无二的大牛,看完本套视频教程完全可以独立进行大数据企业级开发和大数据架构平台建设。  本章节为大数据架构师课程的综合案例课程,大数据生态体系庞大,通过本章节综合案例的讲授,你可以轻松的掌握综合案例技术,掌握本节内容后可以胜任企业级的开发,形成良好的大数据企业开发思维。 这套综合案例绝对三脚猫功夫,真正用心打磨出来,帮助更多的大数据技术爱好者少走弯路。

    课程大纲

    免费试看

  • 大数据实战案例之百度外卖团购网站标签生成视频课程(CeotOS版本)

    4节 59分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 本大数据实战案例是国内真实场景应用实例案例,非常值得学习和借鉴,通过徐老师的讲授,你可以将复杂的应用场景快速掌握和理解,并快速应用到自己的实战项目中。本课程主要包含以下内容:团购网站的标签生成应用-描述-数据结构 团购网站的标签生成应用-数据分析过程 团购网站的标签生成应用-java编程抽取json串中的评论 团购网站的标签生成应用-scala编程实现标签生成程序 

    课程大纲

    免费试看

  • 大数据项目之电信用户画像视频课程(CeotOS版本)

    6节 1小时54分钟
    课程目标:
    徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术、互联网应用、远程通信、网络编程、分布式应用、高可用性计算机网络集群等技术有着丰富的实战经验和深厚的技术功底。 用户画像又称用户角色,作为一种勾画目标用户、联系用户诉求与设计方向的有效工具,用户画像在各领域得到了广泛的应用。我们在实际操作的过程中往往会以最为浅显和贴近生活的话语将用户的属性、行为与期待联结起来。作为实际用户的虚拟代表,用户画像所形成的用户角色并不是脱离产品和市场之外所构建出来的,形成的用户角色需要有代表性能代表产品的主要受众和目标群体。本套课程来源于企业真实的需求,通过非常精简的方式让你学透晦涩的技术。从需求到设计到实现过程全部进行深度剖析和实现,让你能快速的应用到自己的企业级案例中。本课程主要讲解了:用户画像概念.avi性别-年龄进行画像分析.avi性别-年龄进行用户画像MR代码分析与数据解析.avi性别-年龄进行用户画像第一阶段实现运行.avi性别-年龄进行用户画像算法实现.avi性别-年龄进行用户画像总结.avi

    课程大纲

    免费试看

  • 大数据电商体系机构案例视频课程

    9节 9小时8分钟
    课程目标:
    项目是类电商网站,从前端给予spring mvc架构的前端业态展现,以及spring与hibernate在servlet3.0规范下的纯注解编程体验,迅捷完成复杂业务流程的编程实现处理。网站通篇采用maven实现项目依赖管理,更有三方插件在应用过程中的使用便捷扩展与使用。更有从项目运维角度上涉及的nginx服务器的负载均衡实现与动静分离技术中同tomcat服务器的服务器集群整合。其中更是牵涉到操作系统层面上的优化处理,比如立竿见影的cpu affinity进程分配技术以及粒度更细的cgroup实现资源隔离,此类皆为企业生产过程应用的典型技术手段。大数据方面从日志数据的产生,比如通过ab压力测试软件生产的海量日志消息,以及通过flume进行hop式跳跃推送进行kafka消息集群,同实现原生数据的hdfs下沉处理与MR实现的数据清洗过程后的数据转储。使用hive与crontab组合实现网站流量的KPI数据定时统计。高可用方面配置独立的zk集群实现Hadoop的NN、RM以及利用storm实现业务数据的在线实时处理,结合hbase实现数据的实时读写。高可用方向使用独立的zk集群完成Hadoop的NN、RM以及Hbase中Master节点的高可用处理,以避免单点故障。

    课程大纲

    免费试看

资料下载

课程名称 操作
2018年大数据架构师系列教程之Java视频课程(经典) 付费用户专享
2018年大数据架构师系列教程之Linux教程 付费用户专享
2018年徐培成大数据架构师系列教程之Hadoop教程 付费用户专享
2018年大数据架构师系列教程之Hive教程 付费用户专享
2018年大数据架构师系列教程之Avro-pb教程(必须掌握) 付费用户专享
2018年大数据架构师系列教程之Hbase教程 付费用户专享
2018年大数据架构师系列教程之Phoenix视频课程 付费用户专享
2018年大数据架构师系列教程之Zookeeper教程 付费用户专享
2018年大数据架构师系列教程之Redis教程 付费用户专享
2018年大数据架构师系列教程之Flume教程 付费用户专享
2018年大数据架构师系列教程之Sqoop视频课程 付费用户专享
2018年大数据架构师系列教程之Kafka教程 付费用户专享
2018年大数据架构师系列教程之SSM教程 付费用户专享
徐培成最新课程大数据之Storm系列视频教程 付费用户专享
2018年大数据架构师系列教程之Scala教程 付费用户专享
徐培成大数据之Spark2.0系列视频课程 付费用户专享
Flink从入门到上手企业开发系列视频课程 付费用户专享
2018年大数据架构师系列教程之Python+人工智能视频课程 付费用户专享
2018年大数据综合案例:全新友盟升级版视频课程 付费用户专享
大数据实战案例之百度外卖团购网站标签生成视频课程(CeotOS版本) 付费用户专享
大数据项目之电信用户画像视频课程(CeotOS版本) 付费用户专享
大数据电商体系机构案例视频课程 付费用户专享

大数据架构师完整教程(hadoop、spark、flink)

¥3302 ¥1349
在线
客服
在线
客服
APP
下载
×

下载Android客户端

下载iphone 客户端

返回
顶部