输入格式-reader-output-writer分析
{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }}
{{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }}
{{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}
分享
适合人群
具有一定hadoop经验的开发工程师。
你将会学到
了解YARN时间二次分发机制以及DBInputFormat操纵MySQL数据库。
课程简介
Hadoop(终结课)RPC过程二次分发机制
远程调试分析YARN时间二次分发机制
远程调试分析-job在提交到集群上后基于事件的变换过程
RM节点管理器中事件的创建过程
使用Google的protobuf实现串行化并进行性能对比
通过代码考查RPC过程
源代码分析RPC类调用构成
顺序文件读写
顺序文件的mrjob-压缩
自定义输入格式-wholefile作为一次输入
输入格式-reader-output-writer分析
DBInputFormat操纵MySQL数据库
Inputformat内部代码分析-DBInputFormat
.DBOutputFormat-数据库记录写入-WritableComparableBug问题解决
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
{{ detail.username }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
- 1试看 Hadoop第12天-001.RM与Async代码分析54:40
- 2试看 Hadoop第12天-002.远程调试分析YARN时间二次分发机制31:14
- 3试看 远程调试分析-job在提交到集群上后基于事件的变换过程22:58
- 4使用Google的protobuf实现串行化并进行性能对比01:05:43
- 5RM节点管理器中事件的创建过程01:15:22
- 6源代码分析RPC类调用构成41:34
- 7顺序文件读写53:01
- 8顺序文件的mrjob-压缩01:35:52
- 9自定义输入格式-wholefile作为一次输入39:14
- 10输入格式-reader-output-writer分析39:29
58课时
大数据分析电视收视率项目实战教程(Hadoop、Hive升级Spark技术)
10364人学习
猿课教育
5.0
¥318.00
133课时
Spark实战视频课程(Spark基础知识+企业案例)
9530人学习
猿课教育
4.8
¥199.00
34课时
Hadoop(一)入门与环境配置视频课程
3586人学习
猿课教育
1.0
¥34.00
25课时
6期大数据之日志系统Flume技术教程(讲理论还讲实操)
3131人学习
猿课教育
5.0
¥98.00
49课时
Spark基础与提升第一季-核心编程视频课程
3086人学习
猿课教育
暂无评分
¥99.00
5课时
Hadoop安装与搭建
2637人学习
猿课教育
5.0
会员免费
35课时
爱奇艺实时流处理项目实战 (Spark Streaming)
2480人学习
猿课教育
4.5
¥238.00
14课时
Spark企业案例运用日志分析通过H5跨平台展示【综合业务】
1384人学习
猿课教育
5.0
¥19.00