根据字段进行去重-51CTO学堂-linux awk 行

{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }} {{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }} {{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}

提问 {{ interaction.noteNum > 0 ? interaction.noteNum + '篇笔记' : '记笔记' }} 离线观看

下载学堂APP

缓存视频离线看

报告问题离线观看

下载学堂APP

缓存视频离线看

课程介绍

讨论{{interaction.discussNum ? '(' + interaction.discussNum + ')' : ''}}

适合人群

对awk不熟悉的同学

你将会学到

熟练使用awk处理文本数据

课程简介

本课程只讲常见的、典型的、具有代表性的awk的实战案例，也包括运维面试常见题。

课程目录：

1.插入新字段和格式化空白

2.从ifconfig中筛选IPv4地址

3.读取配置文件中的某一段

4.根据字段进行去重

5.使用awk数组做次数统计

6.统计日志中状态码非200的IP数量

7.根据多条件统计独立IP的次数并保存到文件

8.字段缺失和字段中包含字段分隔符的处理方式

9.取字段中指定字符数量

10.行列转换

11-1.awk中处理时间字符串

11-2.awk筛选**到秒级别的日志

12.去掉注释内容

13.前后段落依赖判断

14.两个文件的处理

展开更多

发布

置顶笔记

{{ item.create_time }}{{ Number(item.like_count) || '' }}回复

删除
是否确认删除?
确认
取消
{{ item.is_top == 1 ? '取消置顶' : '置顶'}}
已有置顶的讨论，是否替换已有的置顶？
确认
取消

{{ subitem.create_time }}{{ Number(subitem.like_count) || '' }}回复

删除

点击查看更多收起

发布

{{ noteHeaderTitle }} 笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}

优质笔记

更新于：{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}

公开笔记对他人可见，有机会被管理员评为“优质笔记”

{{ noteEditor.content.length }}/2000

公开笔记

保存

提问

讲师收到你的提问会尽快为你解答。若选择公开提问，可以获得更多学员的帮助。

记录时间点

记录提问时视频播放的时间点，便于后续查看

公开提问

提交