大数据工程师项目实战_大数据系统学习路线-51CTO学堂

课程介绍
课程内容
资料下载
学员评价({{ Number(total) > 999 ? '999+' : total }})

适用人群

IT技术人员
大数据领域新手
编程爱好者
数据分析师
系统架构师

讲师介绍

艾叔

课程: 0学员: 0

计算机教指委“2020、2022年全国高校大数据专业教学研讨与教师培训会议”培训专家；对Linux、Shell编程、Hadoop、Spark、Kubernetes和Docker等技术有深入研究；主持研发“视频监控”、“智能交通检测”、“高容错云存储”、“高性能网络传输”、“Spark算法性能优化”等多个系统和项目；《Spark大数据编程实用教程》《Linux快速入门与实战---基础知识、容器与容器编排、大数据系统运维》等图书作者；指导零基础本科生在云计算、大数据领域获得国家级竞赛特等奖1项、一等奖2项、二等奖2项

课程内容

第一阶段

Hadoop基础

本阶段将介绍Hadoop生态圈、Hadoop中的关键技术

IDEA 统一开发Hadoop（MapReduce）+Spark程序
本课程是“一键部署：基于Docker的Hadoop+Spark集群”的进阶课程本课程将Hadoop（MapReduce）程序和Spark程序的开发，集成统一到了一个开发工具IDEA中。对于大数据开发者来说，可以在IDEA中完成MapReduce程序和Spark程序的编辑、编译、打包、远程提交、运行和调试，既提高了效率，又可以直接和生产环境对接。本课程的关键内容包括：IDEA在Linux下的安装使用
14课时 · 2小时17分钟403人学习 5.0 2021/08/17 更新
课程大纲
课程大纲
免费试看
【企业级】一键部署基于Docker的Hadoop+Spark集群
本课程面向云计算（Docker+K8s）和大数据（Hadoop+Spark）方向的开发者和运维人员，它基于Docker技术，实现了Hadoop集群（HDFS+YARN）以及Spark集群的一键部署，基于本课程的技术，学习者可以在一个虚拟机上，使用一个命令，就可以构建指定数量的HDFS、YARN和Spark集群，这对于学习者而言，是虚拟机+Linux+Shell+Docker+Hadoop+Spar
21课时 · 3小时32分钟1106人学习 5.0 2021/08/05 更新
课程大纲
课程大纲
免费试看

第二阶段

Spark基础

本节段将介绍Spark相关的基础

Spark大数据编程教学要点解析---面向应用型本科院校
本课程不提供学习下载资料
16课时 · 58分钟78人学习 5.0 2021/07/25 更新
课程大纲
课程大纲
免费试看
艾叔：迈向Spark编程高手之路
Spark技术栈Spark快速学习路线图火热的Spark大数据开发“钱途”如何VMware Workstation的host-only、NAT和bridged网络原理与使用Linux有几千个命令，如何破？Scala语言高薪资，但难懂如天书，如何学？命令行运行Spark程序演示IDEA远程提交Spark程序演示如何理解RDD、Application、Job、DAG、Stage和TaskSpark程序
20课时 · 2小时24分钟1242人学习 5.0 2020/09/03 更新
课程大纲
课程大纲
免费试看

第三阶段

Spark研发

本阶段介绍Spark在IDEA中的使用方法和工具技巧

[企业级]零基础IDEA入门Spark大数据开发
本课程面向零基础，或者有一定基础的Spark研发者。精选IDEA在Spark程序开发中的知识点，帮助学习者学习IDEA开发Spark程序的技能，具体内容包括：（1）IDEA运行环境构建（2）Spark+Hadoop分布式集群构建（3）IDEA的构建（4）IDEA开发Spark程序的完整步骤（5）IDEA常用功能及快捷键（6）IDEA调试Spark程序（7）IDEA+Maven开发Spark程序（8
20课时 · 5小时37分钟818人学习 5.0 2019/06/18 更新
课程大纲
课程大纲
免费试看