awk,真的是一款牛逼的神器!

良许Linux

共 3028字,需浏览 7分钟

 ·

2020-04-25 23:22


1754eaeb1e49d11c075c766e1025c9d7.webp3f6b3986825a2b2cb50a59d994f42090.webp


点击「阅读原文」查看良许原创精品视频。

作者:川山甲

来源:https://www.cnblogs.com/baochuan/p/3833130.html

# 序

 

产品经理(PM)过来找你要最近某某的数据,而你知道这些数据目前只能通过日志文件去分析,因为我们知道,我们不可能把所有数据都放入db中(这不科学啊!)。每当有这样任务的时候,你就用php或java(又或c)写一个特殊任务的程序,这真是一件令人头痛的事情。

 b7010287119e58631e82dbcfbe49c464.webp

     

# 放入db???

 

为什么我不建议把数据放入db中呢?优点不言自明,我们可以通过sql语句很容易把数据拿出来。


缺点呢?首先就是我们不能把什么东西都往db里放?


原因,我归纳了以下几点:


1、数据的抽风型:


一般都是某某(不敢指明点姓,怕打击报复)脑门子一拍,突然想要某些数据,这就会来找你要。等这股抽风劲一过,很长时间没人再找你要数据了。


2、数据的臃肿型:


与其说是臃肿还不如说是乱七八糟。你不能把那一坨一坨的杂七杂八的数据,一股脑放入db中吧?那你的后台db成什么样子了?所以我们要管好我们的后院,不能什么东西都放到家里面。


3、成本:


干什么事情,我们不能做赔本的买卖。像这种一次性的买卖,我们就要降低成本去做。

 

为了解决以上问题,我们请出awk神器吧?一种“短小精悍”的神器,常常用一两行代码就能搞定一些复杂的任务。

 9f9b5e97cde736dd6ceaecec1eaf9880.webp


# 本文宗旨

 

awk不难,关键是看我们怎么思考?我的思考方式是:在这么多数据行中,我要找什么(行位置)?找到之后,我们要干什么(如{})?


故我的主题就出来了:找什么和干什么。我不想讲什么语法之类的东西(不要在意这些细节)。

 

# 找什么?

 

这个世界最难的不是做什么,而是找什么?李清照的“寻寻觅觅”,最后把自己寻觅没了。仿古人,俺也寻寻觅觅了一阵子,结果跟清照大姐一样,迷失在寻寻觅觅中,到现在都不知道我在寻觅什么?——个人认为找什么不是体力活,而是技术活。awk吸引我的,也就是它教会了我怎么找我想要的东西?

 

 准备干粮


cat  netstat.txt Proto Recv-Q Send-Q Local-Address          Foreign-Address             Statetcp        0      0 0.0.0.0:3306           0.0.0.0:*                   LISTENtcp        1      1 0.0.0.0:80             0.0.0.0:*                   LISTENtcp        0      0 127.0.0.1:9000         0.0.0.0:*                   LISTENtcp        0      0 yuedu.com:80        124.205.5.146:18245         TIME_WAITtcp        0      0 yuedu.com:80        61.140.101.185:37538        FIN_WAIT2tcp        0      0 yuedu.com:80        110.194.134.189:1032        ESTABLISHEDtcp        0      0 yuedu.com:80        123.169.124.111:49809       ESTABLISHEDtcp        0      0 yuedu.com:80        116.234.127.77:11502        FIN_WAIT2tcp        0      0 yuedu.com:80        123.169.124.111:49829       ESTABLISHEDtcp        0      0 yuedu.com:80        183.60.215.36:36970         TIME_WAITtcp        0   4166 yuedu.com:80        61.148.242.38:30901         ESTABLISHEDtcp        0      1 yuedu.com:80        124.152.181.209:26825       FIN_WAIT1tcp        0      0 yuedu.com:80        110.194.134.189:4796        ESTABLISHEDtcp        0      0 yuedu.com:80        183.60.212.163:51082        TIME_WAITtcp        0      1 yuedu.com:80        208.115.113.92:50601        LAST_ACKtcp        0      0 yuedu.com:80        123.169.124.111:49840       ESTABLISHEDtcp        0      0 yuedu.com:80        117.136.20.85:50025         FIN_WAIT2tcp        0      0 :::22                  :::*                        LISTEN

 

 上小菜(基础条件匹配):


 查询所有tcp中,接受队列非0的网络包。


localhost:zhoubc Guest$ awk '$1 =="tcp" && $2 > 0' netstat.txt tcp        1      1 0.0.0.0:80             0.0.0.0:*                   LISTEN


打印出来的内容,我们不知所云。如果把第一行打出来,就一目了然了。这时候我们要用到awk的全局常量(如果想知道AWK的全局常量,我们可以往下看,附录,我把常用的罗列出来了)NR。


localhost:zhoubc Guest$ awk 'NR==1 || $1 =="tcp" && $2 > 0' netstat.txt Proto Recv-Q Send-Q Local-Address          Foreign-Address             Statetcp        1      1 0.0.0.0:80             0.0.0.0:*                   LISTEN


看爽了是不是?


--END--



本公众号全部博文已整理成一个目录,请在公众号里回复「m」获取!

推荐阅读:

饿了么总监分享:我是如何完成从程序员到管理层的蜕变?

为什么互联网公司天天都在招人?

Linux 命令行下搜索工具大盘点,效率提高不止一倍!


5T技术资源大放送!包括但不限于:C/C++,Linux,Python,Java,PHP,人工智能,单片机,树莓派,等等。在公众号内回复「1024」,即可免费获取!!


浏览 16
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报