13.使用batch计算实现word count

57 未经授权,禁止转载了解课程
课程介绍
讨论{{interaction.discussNum ? '(' + interaction.discussNum + ')' : ''}}
适合人群
对大数据有所了解,有一定编程基础
你将会学到
学习Flink技术,能熟练使用和操作,企业级的开发。
课程简介

本课程授课老师

徐培成老师先后在软件公司人软件工程师、系统分析师、项目经理、软件架构师,主持开发了大产权交易系统,异构数据库协同系统、电信资源管理系统、互联网综合性调查等系统,对java技术、大数据(hadoop、storm、spark)、Python、机器学习、数据库技术

1课程背景.png

Apache Flink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和Scala编写的分布式流数据流引擎。Flink以数据并行和流水线方式执行任意流数据程序,Flink的流水线运行时系统可以执行批处理和流处理程序

本课程主要讲解Flink基础理论,包含概念、原理和API的用法,并且会有相关的代码实操,让你快速学习Flink技术,成为大数据行业急需的人才。

2课程大纲.png

01.体验flink-安装配置-启动 
02.启动flink-scala-shell读取文件实现打印输出 
03.使用flink scala shell实现word count 
04.使用静态数据模拟流操作fromElements 
05.运行word count套接字流计算程序 
06.idea flink api编程 
07.git以及blink 
08.flink scala 编程实现word count 
09.flink java 编程实现word count 
10.flink java word count idea直接运行演示 
11.idea下flink scala编程隐式转换异常-解决办法 
12.idea下flink scala使用元组实现word count 
13.idea下flink scala使用batch计算实现word count 
14.idea下flink java使用batch计算实现word count 
15.idea下flink scala使用batch计算max temp 
16.idea下flink java使用batch计算max temp 
17.idea下flink java使用batch计算max temp排序处理 
18.flink standalone集群部署 
19.scala-shell连接到flink集群 
20.flink集群进程管理命令 
21.flink集群ha配置 
22.scala shell连接到flink集群分布式调试-并发度设置 
23.flink核心API解释 
24.考察flinkjob执行进程分配与flink cli命令行取消job操作 
25.flink tableAPI 
26.flink SQL实现word count查询 
27.flink tableAPI实现word count查询 
28.flink yarn集群 

4课程针对人群.png

适合有Java基础的学员、大数据基础比如Linux、Hadoop、Hive等

我该怎么学,如何才能学好这门课程,给些建议。
  1、时间上的安排建议
  如果您时间上充分,建议以每天10讲的进度往前学习,一定要进行操作,记笔记。
  2、学习要求
  持之以恒,每天都坚持学习(看视频、实际联系,多思考),有问题及时沟通交流解决,建议多看官方文档。
  3、讲师建议
    1.看完视频之后,抛开视频,独立自己去把上课中的示例写一遍,看自己是否理解,如果不正确,可以回过头看再看下视频,如果反复,达到真正理解和熟练学习的目的。
    2.对于项目实战部分,一定要自己亲自动手做一遍,不要满足听完就OK了
    3.一定不要过于依赖视频,要学习看API和使用百度,学习思考,学习举一反三
    4.祝大家学有所成     


展开更多
发布
头像

{{ item.user.nick_name }} {{ EROLE_NAME[item.user.identity] }}

置顶笔记
讨论图
{{ item.create_time }}回复
  • 删除

    是否确认删除?

    确认
    取消
  • {{ item.is_top == 1 ? '取消置顶' : '置顶'}}

    已有置顶的讨论,是否替换已有的置顶?

    确认
    取消
{{ tag.text}}
头像
{{ subitem.user.nick_name }}{{ EROLE_NAME[subitem.user.identity] }}
{{ subitem.create_time }}回复
删除

是否确认删除?

确认
取消
发布
{{pageType === 'video' ? '讨论区抢占沙发,可获得双倍学分' :'讨论区空空如也,你来讲两句~'}}
发布
{{tips.text}}
{{ noteHeaderTitle }} 笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
头像
{{ detail.username }}

公开笔记对他人可见,有机会被管理员评为“优质笔记”

{{ noteEditor.content.length }}/2000

公开笔记
保存
提问

讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。

记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交