awk命令「建议收藏」

awk命令

大家好,又见面了,我是全栈君。

1.awk工作流程


a)先运行BEGIN。
b)读取文件。读入有/n换行符切割的一条记录
c)将记录按指定的域分隔符进行划分域
d)填充域,当中$0表示全部域。$1表示第一个域,$n表示第那个域(默认域分隔符是空白键或者tab键)
e)開始运行模式所相应的动作action
f)接着開始读入第二条记录,直到全部的记录都被读完
g)运行END操作

2.用法


awk [-F field-separator] ‘{pattern + action}’ {filenames}
1. pattern表示awk在数据中查找的内容,action表示在找到匹配内容时所运行的一系列命令。

action{}能够有多个语句,以”;”号隔开。

2. [-F域分隔符]是可选的。 filenames是待处理的文件。在awk中,文件的每一行中,由域分隔符分开的每一项称为一个域。通常,在不指名-F域分隔符的情况下。默认的域分隔符是空格。

3.awk内置变量


ARGC
命令行參数个数
ARGV
命令行參数排列
ENVIRON
支持队列中系统环境变量的使用
FILENAME
awk浏览的文件名称
FNR
浏览文件的记录数
FS
设置输入域分隔符,等价于命令行 -F选项
NF
浏览记录的域的个数
NR
已读的记录数
OFS
输出域分隔符
ORS
输出记录分隔符
RS
控制记录分隔符

某个文件从第n行到行尾
awk ‘{NR > n}’ filename

4.awk内置字符串函数


gsub(r,s)
在整个$0中用s替代r

gsub(r,s,t)
在整个t中用s替代r

index(s,t)
返回s中字符串t的第一位置

length(s)
返回s长度

match(s,r)
測试s是否包括匹配r的字符串

split(str,array,fs )
在fs上将s分成序列a

sprint(fmt,exp)
返回经fmt格式化后的exp

sub(r,s)
用$0中最左边最长的子串取代s

substr(s,p)    
返回字符串s中从p開始的后缀部分

substr(s,p,n)  
返回字符串s中从p開始长度为n的后缀部分


5.BEGIN和END


BEGIN表示在处理随意行之前进行的操作
END表示在全部输入行处理完后进行的处理。


6.条件语句


if (expression) {
    statement;
    statement;
    ... ...
}

if (expression) {
    statement;
} else {
    statement2;
}

if (expression) {
    statement1;
} else if (expression1) {
    statement2;
} else {
    statement3;
}

7.数组


由于awk中数组的下标能够是数字和字母,数组的下标通常被称为keyword(key)。值和keyword都存储在内部的一张针对key/value应用hash的表格里。由于hash不是顺序存储,因此在显示数组内容时会发现。它们并非依照你预料的顺序显示出来的。数组和变量一样,都是在使用时自己主动创建的。awk也相同会自己主动推断其存储的是数字还是字符串。一般而言。awk中的数组用来从记录中收集信息,能够用于计算总和、统计单词以及跟踪模板被匹配的次数等等。

awk -F ':' 'BEGIN {count=0;} {name[count] = $1;count++;}; END{for (i = 0; i < NR; i++) print i, name[i]}' /etc/passwd
root
daemon
bin
sys
sync
games
......

awk -F’\t’ ‘{ a[$1]++ }’END'{ for(j in a) print a[j],j }’ filename | sort -rn | more 

filename的内容为:
apple
banana
apple
apple
banana
pear

输出结果为:
3 apple
2 banana
1 pear


版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/116223.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • 虚地址转化为内存地址_转换法与转化法

    虚地址转化为内存地址_转换法与转化法页式地址变换虚地址结构虚地址是用户程序中的逻辑地址,它包括页号和页内地址(页内位移)区分页号和页内地址的依据是页的大小,页内地址占虚地址的低位部分,页号占虚地址的高位部分。假设页面大小为1024字节,虚地址占用2个字节(16位)虚地址转换为内存地址计算如果,虚地址(逻辑地址、程序地址)以十六进制、八进制、二进制的形式给出第一步,将虚地址转换成二进制的数;第二步,按页的大…

    2025年7月12日
    4
  • 面试题vue双向绑定原理_vue路由面试题

    面试题vue双向绑定原理_vue路由面试题引言:vue的双向绑定原理简单来说就是:vue内部使用object.defineProperty方法给所有数据加上getter和setter方法,在数据发生改变时发布消息给订阅者Watcher,触发响应的监听回调。object.defineProperty是JS里一个重要的方法,vue的双向绑定ES6里一些方法都是靠它实现的。如图所示zuoerobject.defineProperty…

    2022年10月17日
    2
  • 一致性哈希 哈希槽(哈希碰撞和哈希冲突)

    背景随着memcache和redis的出现,更多人认识到了一致性哈希。一致性哈希用于解决分布式缓存系统中的数据选择节点存储问题和数据选择节点读取问题以及在增删节点后减少数据缓存的消失范畴,防止雪崩的发生。哈希槽是在rediscluster集群方案中采用的,rediscluster集群没有采用一致性哈希方案,而是采用数据分片中的哈希槽来进行数据存储与读取的。一致性哈希一致性hash是一个0-2^32的闭合圆,(拥有2^23个桶空间,每个桶里面可以存储很多数据,可以理解为s3的存储桶)所

    2022年4月14日
    80
  • JavaScript进阶之道

    JavaScript进阶之道

    2021年7月5日
    93
  • C++实现学生选课管理系统

    C++实现学生选课管理系统这是主函数逻辑部分#include<iostream>#include”class.h”#include”student.h”usingnamespacestd;intmain(){ courseA; studentB[10];//10个学生 intstucnt=0; intdengluflag=-1;…

    2022年10月16日
    2
  • Java安全之Commons Collections5分析

    Java安全之CommonsCollections5分析文章首发:Java安全之CommonsCollections5分析0x00前言在后面的几条CC链中,如果和前面的链构造都是基本一样的

    2021年12月12日
    43

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号